"Debug Assertion Failed" при парсинге кириллической строки

@emeNy · Регистрация: 25.09.2014

Студворк — интернет-сервис помощи студентам

Здравствуйте.
Тривиальный пример.
Считываю из файла(UTF-8) строку: "Привет"

C++
1
2
3
4
5
6
7
8
9
10
11
setlocale(LC_ALL, "Russia");
ifstream ff;
ff.open("C:\\CBK2.fmc", ios::in);
std::string str;
std::string strout;
 
getline(ff, str);
qi::parse(teststr.begin(), teststr.end(), qi::raw[*qi::alpha], strout);
std::cout << strout;
 
f.close();

Получаю Debug Assertion Failed и собственно не парсит. С английским норм.
Что сделать, что бы работало?

@ForEveR · 25.09.2014, 15:32

emeNy, Использовать std::wstring как вариант.

@emeNy · 25.09.2014, 17:05 **[ТС]**

ForEveR, Да, я пробовал. Не помогло. Тоже самое

@ForEveR · 25.09.2014, 20:21

emeNy, Сама строка из файла считывается или нет? Если нет, юзать std::wstring, std::wifstream. Если проблема в QI - читать доку. Так же можно попробовать отключить Debug режим, чтобы студия не ассертила все подряд.

@Crast · 30.09.2014, 09:57

Жесть. Пришел на форум. Получил вредный совет, lol.
1. Локаль нужна для кодировки iso-88xx. И наверняка не в таком виде.
2. spirit не может парсить UTF-8 напрямую. Нужно преобразования в/из юникод, который он понимает.
Такой код еще может заработать:

C++
1
2
3
4
std::wstring strout;
std::wstring strin = boost::locale::conv::utf_to_utf<wchar_t>(str);
qi::parse(strin .begin(), strin .end(), qi::raw[*qi::standard_wide::alpha], strout);
std::cout << boost::locale::conv::utf_to_utf<char>(strout);

UPD: В регэкспах есть итератор для преобразования utf->unicode на ходу.

@emeNy · 30.09.2014, 16:21 **[ТС]**

Crast, большое спасибо, будем пробовать!

Добавлено через 2 часа 4 минуты
Crast,

C++
1
2
std::string str = "Привет";
std::wstring strin = boost::locale::conv::utf_to_utf<wchar_t>(str);

strin = ""
Не вышло

Добавлено через 1 минуту
Если str = "Hello" - работает

@Crast · 01.10.2014, 08:15

iswalpha почему-то требует все-таки установить локаль(1), но выражения хорошо парсятся и без нее (2).
Это вообще какая-то девиантная функция )). Конечно это могли сделать для производительности. В любом случае я бы посоветовал избегать standard_wide::alpha, т.к. юникод должен парситься вне зависимости от конкретного языка.

Добавлено через 10 часов 3 минуты
UPD: чтобы распозновать юникод iswalpha требует только юникодную локаль.

@emeNy · 01.10.2014, 11:44 **[ТС]**

Crast, Ваши примеры очень помогли, спасибо!

Новые блоги и статьи Все статьи Все блоги /
SDL3 для Desktop (MinGW): Создаём пустое окно с нуля для 2D-графики на SDL3, Си и C++ 8Observer8 10.03.2026 Содержание блога Финальные проекты на Си и на C++: hello-sdl3-c. zip hello-sdl3-cpp. zip Результат:	Установка CMake и MinGW 13.1 для сборки С и C++ приложений из консоли и из Qt Creator в EXE 8Observer8 10.03.2026 Содержание блога MinGW - это коллекция инструментов для сборки приложений в EXE. CMake - это система сборки приложений. Здесь описаны базовые шаги для старта программирования с помощью CMake и. . .	Как дизайн сайта влияет на конверсию: 7 решений, которые реально повышают заявки Neotwalker 08.03.2026 Многие до сих пор воспринимают дизайн сайта как “красивую оболочку”. На практике всё иначе: дизайн напрямую влияет на то, оставит человек заявку или уйдёт через несколько секунд. Даже если у вас. . .	Модульная разработка через nuget packages DevAlt 07.03.2026 Сложившийся в . Net-среде способ разработки чаще всего предполагает монорепозиторий в котором находятся все исходники. При создании нового решения, мы просто добавляем нужные проекты и имеем. . .
Модульный подход на примере F# DevAlt 06.03.2026 В блоге дяди Боба наткнулся на такое определение: В этой книге («Подход, основанный на вариантах использования») Ивар утверждает, что архитектура программного обеспечения — это структуры,. . .	Управление камерой с помощью скрипта OrbitControls.js на Three.js: Вращение, зум и панорамирование 8Observer8 05.03.2026 Содержание блога Финальная демка в браузере работает на Desktop и мобильных браузерах. Итоговый код: orbit-controls-threejs-js. zip. Сканируйте QR-код на мобильном. Вращайте камеру одним пальцем,. . .	SDL3 для Web (WebAssembly): Синхронизация спрайтов SDL3 и тел Box2D 8Observer8 04.03.2026 Содержание блога Финальная демка в браузере. Итоговый код: finish-sync-physics-sprites-sdl3-c. zip На первой гифке отладочные линии отключены, а на второй включены:. . .	SDL3 для Web (WebAssembly): Идентификация объектов на Box2D v3 - использование userData и событий коллизий 8Observer8 02.03.2026 Содержание блога Финальная демка в браузере. Итоговый код: finish-collision-events-sdl3-c. zip Сканируйте QR-код на мобильном и вы увидите, что появится джойстик для управления главным героем. . . .

@ForEveR В астрале 8049 / 4806 / 655 Регистрация: 24.06.2010 Сообщений: 10,562
	25.09.2014, 15:32
	emeNy, Использовать std::wstring как вариант. 0

@emeNy 0 / 0 / 0 Регистрация: 25.09.2014 Сообщений: 8
	25.09.2014, 17:05 [ТС]
	ForEveR, Да, я пробовал. Не помогло. Тоже самое 0

@ForEveR В астрале 8049 / 4806 / 655 Регистрация: 24.06.2010 Сообщений: 10,562
	25.09.2014, 20:21
	emeNy, Сама строка из файла считывается или нет? Если нет, юзать std::wstring, std::wifstream. Если проблема в QI - читать доку. Так же можно попробовать отключить Debug режим, чтобы студия не ассертила все подряд. 0

@Crast 72 / 72 / 5 Регистрация: 10.02.2013 Сообщений: 434
	01.10.2014, 08:15
	iswalpha почему-то требует все-таки установить локаль(1), но выражения хорошо парсятся и без нее (2). Это вообще какая-то девиантная функция )). Конечно это могли сделать для производительности. В любом случае я бы посоветовал избегать standard_wide::alpha, т.к. юникод должен парситься вне зависимости от конкретного языка. Добавлено через 10 часов 3 минуты UPD: чтобы распозновать юникод iswalpha требует только юникодную локаль. 0

@emeNy 0 / 0 / 0 Регистрация: 25.09.2014 Сообщений: 8
	01.10.2014, 11:44 [ТС]
	Crast, Ваши примеры очень помогли, спасибо! 0