Определение кодировки файла

@martb1n · Регистрация: 13.04.2009

Студворк — интернет-сервис помощи студентам

Помогите определить кодировку файла(файл текстовый). Имеется набор файлов в различной кодировке, проблема в том что при отображении содержимого появляются иероглифы и\или знаки вопросов.

@kolorotur · 15.02.2013, 19:40

К сожалению, на данный момент единственный 100% верный способ определить кодировку текста - это знать ее заранее.
В противном случае можно либо смотреть на BOM для некоторых кодировок (UTF8, например), что все равно не дает полной гарантии, либо проводить лексический анализ текста - это пробовать конвертировать его в разные кодировки и смотреть, получается ли на выходе читаемый текст.

@martb1n · 16.02.2013, 17:00 **[ТС]**

Сообщение от kolorotur

смотреть, получается ли на выходе читаемый текст

это как я понимаю может сделать только человек

@kolorotur · 16.02.2013, 17:05

Сообщение от martb1n

это как я понимаю может сделать только человек

Не обязательно.
Вот, к примеру, онлайн-декодер - с переменным успехом определяет кодировку текста.

@turbanoff · 18.02.2013, 07:27

Mozilla сделала такую open-source либу, после чего её портировали и на c#
http://code.google.com/p/ude/

Новые блоги и статьи Все статьи Все блоги /
Вывод текста со шрифтом TTF на Android с помощью библиотеки SDL3_ttf 8Observer8 25.01.2026 Содержание блога Если у вас не установлены Android SDK, NDK сделайте это, JDK, то сделайте это по следующей инструкции: Установка Android SDK, NDK, JDK, CMake и т. д. Перейдите по ссылке:. . .	Использование SDL3-callbacks вместо функции main() на Android, Desktop и WebAssembly 8Observer8 24.01.2026 Содержание блога Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .	моя боль iceja 24.01.2026 Выложила интерполяцию кубическими сплайнами www. iceja. net REST сервисы временно не работают, только через Web. Написала за 56 рабочих часов этот сайт с нуля. При помощи perplexity. ai PRO , при. . .	Модель сукцессии микоризы anaschu 24.01.2026 Решили писать научную статью с неким РОманом
http://iceja.net/ математические сервисы iceja 20.01.2026 Обновила свой сайт http:/ / iceja. net/ , приделала Fast Fourier Transform экстраполяцию сигналов. Однако предсказывает далеко не каждый сигнал (см ограничения http:/ / iceja. net/ fourier/ docs ). Также. . .	http://iceja.net/ сервер решения полиномов iceja 18.01.2026 Выкатила http:/ / iceja. net/ сервер решения полиномов (находит действительные корни полиномов методом Штурма). На сайте документация по API, но скажу прямо VPS слабенький и 200 000 полиномов. . .	Расчёт переходных процессов в цепи постоянного тока igorrr37 16.01.2026 / * Дана цепь(не выше 3-го порядка) постоянного тока с элементами R, L, C, k(ключ), U, E, J. Программа находит переходные токи и напряжения на элементах схемы классическим методом(1 и 2 з-ны. . .	Восстановить юзерскрипты Greasemonkey из бэкапа браузера damix 15.01.2026 Если восстановить из бэкапа профиль Firefox после переустановки винды, то список юзерскриптов в Greasemonkey будет пустым. Но восстановить их можно так. Для этого понадобится консольная утилита. . .

@martb1n 56 / 56 / 11 Регистрация: 13.04.2009 Сообщений: 169

	.NET 4.x Определение кодировки файла 15.02.2013, 18:05. Показов 4056. Ответов 4 Метки нет (Все метки) Помогите определить кодировку файла(файл текстовый). Имеется набор файлов в различной кодировке, проблема в том что при отображении содержимого появляются иероглифы и\или знаки вопросов. 0

@kolorotur 17823 / 12973 / 3382 Регистрация: 17.09.2011 Сообщений: 21,261
	15.02.2013, 19:40
	К сожалению, на данный момент единственный 100% верный способ определить кодировку текста - это знать ее заранее. В противном случае можно либо смотреть на BOM для некоторых кодировок (UTF8, например), что все равно не дает полной гарантии, либо проводить лексический анализ текста - это пробовать конвертировать его в разные кодировки и смотреть, получается ли на выходе читаемый текст. 1

@turbanoff 4094 / 3828 / 745 Регистрация: 18.05.2010 Сообщений: 9,331 Записей в блоге: 12
	18.02.2013, 07:27
	Mozilla сделала такую open-source либу, после чего её портировали и на c# http://code.google.com/p/ude/ 1