Умное определение кодировки

@Xero201 · Регистрация: 27.12.2008

Студворк — интернет-сервис помощи студентам

Хочется, чтобы кодировка выбранного пользователем файла определялась автоматически, как это делает сам Windows в окошке предварительного просмотра файла.
Нашел хорошую библиотеку EncodingTools (http://www.codeproject.com/KB/... oding.aspx), но и она срабатывает не всегда (в то время как магический режим предварительного просмотра Microsoft работает). Как ему это удается? Может кто-нибудь сможет помочь?

@Delog · 26.05.2011, 09:52

Автоматически кодировка определяется методом частотного анализа. Чем больше текста, тем точнее определится кодировка, но 100% результата гарантировать не может никто. Предварительный просмотр виндоус, видимо, использует лучшие коэффициенты или дополнительно делает проверку по словарю.

Можете так же посмотреть исходники одного из многочисленных блокнотов, которые умеют определять кодировку автоматически. Например, AkelPad.

Новые блоги и статьи Все статьи Все блоги /
моя боль iceja 24.01.2026 Выложила интерполяцию кубическими сплайнами www. iceja. net REST сервисы временно не работают, только через Web. Написала за 56 рабочих часов этот сайт с нуля. При помощи perplexity. ai PRO , при. . .	Модель сукцессии микоризы anaschu 24.01.2026 Решили писать научную статью с неким РОманом	http://iceja.net/ математические сервисы iceja 20.01.2026 Обновила свой сайт http:/ / iceja. net/ , приделала Fast Fourier Transform экстраполяцию сигналов. Однако предсказывает далеко не каждый сигнал (см ограничения http:/ / iceja. net/ fourier/ docs ). Также. . .	http://iceja.net/ сервер решения полиномов iceja 18.01.2026 Выкатила http:/ / iceja. net/ сервер решения полиномов (находит действительные корни полиномов методом Штурма). На сайте документация по API, но скажу прямо VPS слабенький и 200 000 полиномов. . .
Расчёт переходных процессов в цепи постоянного тока igorrr37 16.01.2026 / * Дана цепь(не выше 3-го порядка) постоянного тока с элементами R, L, C, k(ключ), U, E, J. Программа находит переходные токи и напряжения на элементах схемы классическим методом(1 и 2 з-ны. . .	Восстановить юзерскрипты Greasemonkey из бэкапа браузера damix 15.01.2026 Если восстановить из бэкапа профиль Firefox после переустановки винды, то список юзерскриптов в Greasemonkey будет пустым. Но восстановить их можно так. Для этого понадобится консольная утилита. . .	Сукцессия микоризы: основная теория в виде двух уравнений. anaschu 11.01.2026 https:/ / rutube. ru/ video/ 7a537f578d808e67a3c6fd818a44a5c4/	WordPad для Windows 11 Jel 10.01.2026 WordPad для Windows 11 — это приложение, которое восстанавливает классический текстовый редактор WordPad в операционной системе Windows 11. После того как Microsoft исключила WordPad из. . .

@Xero201 68 / 66 / 19 Регистрация: 27.12.2008 Сообщений: 212

	Умное определение кодировки 26.05.2011, 01:33. Показов 3643. Ответов 1 Метки нет (Все метки) Хочется, чтобы кодировка выбранного пользователем файла определялась автоматически, как это делает сам Windows в окошке предварительного просмотра файла. Нашел хорошую библиотеку EncodingTools (http://www.codeproject.com/KB/... oding.aspx), но и она срабатывает не всегда (в то время как магический режим предварительного просмотра Microsoft работает). Как ему это удается? Может кто-нибудь сможет помочь? 0

@Delog I ♥ C# 470 / 262 / 25 Регистрация: 07.05.2010 Сообщений: 567
	26.05.2011, 09:52
	Автоматически кодировка определяется методом частотного анализа. Чем больше текста, тем точнее определится кодировка, но 100% результата гарантировать не может никто. Предварительный просмотр виндоус, видимо, использует лучшие коэффициенты или дополнительно делает проверку по словарю. Можете так же посмотреть исходники одного из многочисленных блокнотов, которые умеют определять кодировку автоматически. Например, AkelPad. 0