Utf-8. И снова кодировки

@Retyrn0 · Регистрация: 24.06.2013

Студворк — интернет-сервис помощи студентам

Доброго времени суток. Подскажите как конвертировать всё введённое с клавиатуры в utf-8.
Т.е. консоль запускается в какой-то стране Мира, там пользуют некий язык. Нужно определить текущую кодировку консоли и переконвертировать в utf-8...как? Виндось. Нужна функция вида:

C++
1
2
3
4
5
6
void gets_utf8(char*BUF)
{
      gets(BUF);
//определяем текущую кодировку, конвертируем в utf-8 и результат заносим в тот же массив, вместо исходных данных
//всё, мы молодцы. После завершения функции в переданном массиве содержится введённый текст в utf-8
}

Если можно, прямо результат, а не ссылки на чтиво, ибо чтиво я почитал и там как-то размыто для разных кодировок.
Надеюсь не слишком трудно будет жахнуть работающую реализацию подобной штуки. Спасибо.

@DrOffset · 30.10.2014, 18:54

Сообщение от nmcf

Я просто немного о другом сказал. wcin работает без переключения консоли на utf, и корректно формирует строку, но ограничен выбранной локалью.
Можно французскую установить.

Я не говорил, что он вообще не работает. Я говорил что он не работает правильно. А правильно - это когда без перекодировки и выбора локали. Зачем нам wchar_t и utf-16, если мы по факту ограничены текущей локалью? Это же неправильно. Тогда проще оставаться на 866 и char. Потому я и сказал, что правильно без юникодного режима это работать не будет. Чего вот придрались, я не пойму.

@nmcf · 30.10.2014, 19:03

Retyrn0, может лучше формой воспользоваться? Кто вообще станет вводить текст в консоль?

@Retyrn0 · 30.10.2014, 19:11 **[ТС]**

Сообщение от nmcf

может лучше формой воспользоваться?

Лучше и я это потом буду реализовывать. Но проект по базам данных.
Во-первых, мне по старинному программерскому убеждению казалось, что консоль проще с точки зрения понимания принципов и естественных ходом веще будет перевод проект на окна.
Во-вторых, настоящая тру база данных просто обязана иметь консольный вариант, ибо иначе как-то беспантово

А вообще, теперь, когда я практически допонял как и что, стало ясно и то, что окна в этом плане проще - там и так всё в wchar_t без проблем вносится.

Добавлено через 2 минуты
Остаётся только вайдчартумультибайт и порядок...но до чего информация в нете намудрёная, хрен поймёшь сразу без ста граммов и помощи хорошо объясняющих) За что вам отдельное спасибо)

@nmcf · 30.10.2014, 19:18

codecvt проще использовать при записи файла, чем WideCharToMultibyte().

@Retyrn0 · 30.10.2014, 19:34 **[ТС]**

Сообщение от nmcf

codecvt проще использовать при записи файла, чем WideCharToMultibyte().

А можно пример?

@nmcf · 30.10.2014, 19:37

Я же приводил пример, на второй странице смотри. Utf-8. И снова кодировки

@Retyrn0 · 30.10.2014, 20:14 **[ТС]**

Прошу прощения, запамятовал. Ну мне кажется всё-таки завернуть мультибайт ещё проще будет.

C++
1
2
3
4
5
6
7
BYTE*utf8(wchar_t*buf)
{
    char tempbuf[buf_len];
    WideCharToMultiByte(CP_UTF8,0,buf,-1,tempbuf,buf_len,NULL,NULL);
    CopyMemory(buf,tempbuf,strlen(tempbuf)+1);
    return (BYTE*)buf;
}

Не глядя на грубые нарушения, ибо накидал на глаз по-быстрому, получается достаточно такой хрени:

C++
1
fout<<utf8(wstr);

или вообще задефайнить эту чучу по тому же принципу. Разве не проще?

@nmcf · 30.10.2014, 20:20

Ну не знаю, как может быть такая конструкция проще стандартного для C++ codecvt.

@Retyrn0 · 30.10.2014, 20:28 **[ТС]**

C++
1
locale loc (locale(), new codecvt_utf8<wchar_t, 0x10ffffUL, codecvt_mode::generate_header>);

Не совсем понимаю сдесь видимо к текущему моменту есть лишнее...
Или

C++
1
fout<<utf8(wstr);

Второй вариант ИМХО короче и понятнее. Хотя, возможно, если из первого варианта убрать баловство с локалями, то может получиться и проще...но сейчас оно выглядит довольно запутано.

Добавлено через 1 минуту
Я, например, сейчас не понимаю что убрать, чтобы аналогичный рзультат получить. Потому что впервые знакомлюсь с codecvt. Опыт не пропьёшь)

@nmcf · 30.10.2014, 20:29

Так это 1 раз задаётся при создании файлового потока. А потом вывод идёт просто

C++
1
fout << wstr;

И можно также числа выводить, например. Всё будет конвертироваться.

@Retyrn0 · 30.10.2014, 20:35 **[ТС]**

Сообщение от nmcf

Код C++1
fout << wstr;

Убедительно)
Так я должен скопировать ту строку(куда-то) и подключить библиотеку(тоже не хотелось бы, ну да ладно)?
Я просто самого механизма не понимаю..там все языки будут работать?
Я может занудствую, просто сейчас тот вариант работает и мой мозг очень не хочет что-то меня, как в том анекдоте про сына программиста)

@nmcf · 30.10.2014, 20:39

codecvt в данном случае конвертирует wchar_t в utf8 при записи в файл. Язык определяется содержимым строки wchar_t.

Новые блоги и статьи Все статьи Все блоги /
Транслитерация текста с кириллицы на латиницу (вариант №2) Maks 13.11.2026 Обновленная версия ранее созданной обработки. Добавлено: - Проверка исходного текста на кириллицу, через обращение к стандартной функции "ТолькоКириллицаВСтроке" из общего модуля. . .	Часы с термометром и праздничным календарем yariko 12.11.2026 Сегодня мы рассмотрим как можно сделать отличные многофункциональные часы. Итак, поставим конкретную задачу: разработать часы с календарем, двумя термодатчиками, выводом поздравительных сообщений. . .	Транслитерация текста с кириллицы на латиницу (вариант №1) Maks 11.11.2026 Решил облегчить жизнь себе и коллегам админам при создании электронных почтовых ящиков для пользователей, в результате написал обработку "Транслитерация текста" с кириллицы на латиницу, а в ней. . .	Книги по геймдизайну, левел-дизайну, игровым механикам и проектированию игрового опыта 8Observer8 08.11.2026 Содержание блога \| English Version 1. 2003 - 06 - Designing Virtual Worlds (1st Edition) Автор: Richard A. Bartle \| Объем: 768 стр. Ссылки: Amazon . . .
Родители токсичные абьюзеры по отношению к своим детям ругают их оскорбляют не любят zorxor 08.11.2026 Жить в атмосфере постоянных оскорблений, критики и холодности со стороны родителей — это тяжелое и болезненное испытание, которое оставляет глубокие эмоциональные раны. Токсичное и абьюзивное. . .	Как только я захожу к себе в свою комнату я сразу же с себя снимаю свои трусы. Ответ от Джемени ИИ. zorxor 08.11.2026 Джемени, как только я захожу к себе в свою комнату я сразу же с себя снимаю свои трусы. Многие люди, возвращаясь домой, сразу переодеваются в максимально свободную одежду или вовсе предпочитают. . .	Паттерн очереди действий/команд (Action / Command Queue). Система очереди действий и кат-сцен с SDL3 Callbacks, cglm и OpenGL 8Observer8 07.11.2026 Содержание блога \| English Version Руководство для начинающих по реализации паттерна очереди действий/ команд (Action / Command Queue) на C++ (C++20) с использованием официального SDL3 Callbacks. . .	Проверка полного ФИО в типовом справочнике Maks 07.11.2026 Решение реализовано в конфигурации КА2, на примере справочника "КонтактныеЛицаПартнеров". Задача: Запрет инициалов. Не допускаеть использование сокращений вида "И. И. ", "И. И. ", "И И" и. . .

@nmcf 7804 / 6568 / 2988 Регистрация: 14.04.2014 Сообщений: 28,705
	30.10.2014, 19:03
	Retyrn0, может лучше формой воспользоваться? Кто вообще станет вводить текст в консоль? 0

@nmcf 7804 / 6568 / 2988 Регистрация: 14.04.2014 Сообщений: 28,705
	30.10.2014, 19:18
	codecvt проще использовать при записи файла, чем WideCharToMultibyte(). 0

@nmcf 7804 / 6568 / 2988 Регистрация: 14.04.2014 Сообщений: 28,705
	30.10.2014, 19:37
	Я же приводил пример, на второй странице смотри. Utf-8. И снова кодировки 0

@nmcf 7804 / 6568 / 2988 Регистрация: 14.04.2014 Сообщений: 28,705
	30.10.2014, 20:20
	Ну не знаю, как может быть такая конструкция проще стандартного для C++ codecvt. 0

@nmcf 7804 / 6568 / 2988 Регистрация: 14.04.2014 Сообщений: 28,705
	30.10.2014, 20:39
	codecvt в данном случае конвертирует wchar_t в utf8 при записи в файл. Язык определяется содержимым строки wchar_t. 1