Не знаю как определить кодировку

@botstars · Регистрация: 17.05.2013

Author24 — интернет-сервис помощи студентам

У меня есть скрипт, который извлекает из странички ее мета теги и название, но в браузере, если кодировки не совпадают, выводятся иероглифы. Подставить под каждый сайт свою кодировку не вариант у меня их много и не знаю, как поменять кодировку в зависимости от полученной информации. Вот скрипт, который я использую

PHP

function file_get_contents_curl($url)
{
    $ch = curl_init();
 
    curl_setopt($ch, CURLOPT_HEADER, 0);
    curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
    curl_setopt($ch, CURLOPT_URL, $url);
    curl_setopt($ch, CURLOPT_FOLLOWLOCATION, 1);
 
    $data = curl_exec($ch);
    curl_close($ch);
 
    return $data;
}
 
$html = file_get_contents_curl("http://www.yandex.by/");
 
//parsing begins here:
$doc = new DOMDocument();
@$doc->loadHTML($html);
$nodes = $doc->getElementsByTagName('title');
 
//get and display what you need:
$title = $nodes->item(0)->nodeValue;
 
$metas = $doc->getElementsByTagName('meta');
 
for ($i = 0; $i < $metas->length; $i++)
{
    $meta = $metas->item($i);
    if($meta->getAttribute('name') == 'description')
        $description = $meta->getAttribute('content');
    if($meta->getAttribute('name') == 'keywords')
        $keywords = $meta->getAttribute('content');
}
 
echo "Title: $title". '<br/><br/>';
echo "Description: $description". '<br/><br/>';
echo "Keywords: $keywords";

менял я кодировку заменой строчки

PHP

1	@$doc->loadHTML($html);

на

PHP

1	@$doc->loadHTML(mb_convert_encoding($html, 'HTML-ENTITIES', 'UTF-8'));

спасибо за ответ.

@your_tremor · 12.11.2013, 19:55

Достоверно узнать кодировку не имея четкого указания, какая кодировка, имея лишь текст не получится. С какой-то вероятностью это можно определить по кодам используемых символов, но это далеко не 100%.. Проще создать файл настроек по каждому сайту и указывать кодировку, типа такого

PHP

1	return array('http://yondix.ru"=>'UTF-8',...);

@MarlboroRed · 12.11.2013, 20:07

Можно попробовать mb_detect_encoding.

@botstars · 12.11.2013, 20:53 **[ТС]**

Сообщение от MarlboroRed

Можно попробовать mb_detect_encoding.

все равно ничего не вышло кодировку определило пытаюсь подставить переменную ничего не вышло.

Добавлено через 14 минут
Все еще зависит от странички на которой сам код сохранил в UTF-8 , без BOM стало показывать нормально, но все равно не во всех случаях.

@MarlboroRed Марсианин 87 / 87 / 22 Регистрация: 11.10.2012 Сообщений: 333
	12.11.2013, 20:07	3
	Можно попробовать mb_detect_encoding. 1

@botstars 2 / 3 / 2 Регистрация: 17.05.2013 Сообщений: 403
	12.11.2013, 20:53 [ТС]	4
	Сообщение от MarlboroRed Можно попробовать mb_detect_encoding. все равно ничего не вышло кодировку определило пытаюсь подставить переменную ничего не вышло. Добавлено через 14 минут Все еще зависит от странички на которой сам код сохранил в UTF-8 , без BOM стало показывать нормально, но все равно не во всех случаях. 0