Запрос и разбор html страницы

@7_ON · Регистрация: 22.05.2012

Author24 — интернет-сервис помощи студентам

Доброго времени суток.
Возникла такая задача как мониторинг одного или нескольких сайтов на наличие определенной информации. Как пример можно привести сканирование интернет магазина на поступление книг определенного автора.
С такого рода задачей сталкиваюсь в первые, может кто то подскажет, что почитать и куда копнуть.

@Никита Однороб · 19.11.2012, 18:59

Копай в сторону CURL. Вот пример получения страницы в переменную:

PHP

<?php
$url = "https://www.cyberforum.ru/";
@$curl=curl_init();
if (!curl_errno($curl)) {
  curl_setopt($curl,CURLOPT_URL,$url);
  curl_setopt($curl,CURLOPT_USERAGENT,"Mozilla");
  curl_setopt($curl,CURLOPT_HEADER,0);
  curl_setopt($curl,CURLOPT_RETURNTRANSFER,1);
  $site_content = curl_exec($curl);
  curl_close($curl);
}
?>

А дальше разбирай код с помощью регулярных выражений.

@r3ntg3n · 21.11.2012, 00:24

Сообщение от Никита Однороб

А дальше разбирай код с помощью регулярных выражений.

И вы туда же. Вам удобно городить тонну регулярок? Используйте DOMDocument для парсинга.

@Никита Однороб · 21.11.2012, 18:36

7_ON, а код работает?

@7_ON · 21.11.2012, 18:40 **[ТС]**

Перечитал немного литературы, и ушел на привычный мне C#) И за пару дней набрасал парсер для одного сайтика в планах еще несколько сайтов.

@7_ON 0 / 0 / 0 Регистрация: 22.05.2012 Сообщений: 5
		1
	Запрос и разбор html страницы 19.11.2012, 17:40. Показов 1174. Ответов 4 Метки нет (Все метки) Доброго времени суток. Возникла такая задача как мониторинг одного или нескольких сайтов на наличие определенной информации. Как пример можно привести сканирование интернет магазина на поступление книг определенного автора. С такого рода задачей сталкиваюсь в первые, может кто то подскажет, что почитать и куда копнуть. 0

@r3ntg3n 112 / 93 / 15 Регистрация: 03.10.2012 Сообщений: 315
	21.11.2012, 00:24	3
	Сообщение от Никита Однороб А дальше разбирай код с помощью регулярных выражений. И вы туда же. Вам удобно городить тонну регулярок? Используйте DOMDocument для парсинга. 0

@Никита Однороб 109 / 88 / 28 Регистрация: 21.08.2012 Сообщений: 371
	21.11.2012, 18:36	4
	7_ON, а код работает? 0

@7_ON 0 / 0 / 0 Регистрация: 22.05.2012 Сообщений: 5
	21.11.2012, 18:40 [ТС]	5
	Перечитал немного литературы, и ушел на привычный мне C#) И за пару дней набрасал парсер для одного сайтика в планах еще несколько сайтов. 0