Форум программистов, компьютерный форум, киберфорум
PHP
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 5.00/40: Рейтинг темы: голосов - 40, средняя оценка - 5.00
 Аватар для Furious
1 / 1 / 0
Регистрация: 14.11.2008
Сообщений: 9

Yandex wordstat parser

13.02.2009, 14:32. Показов 8116. Ответов 1
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Всем привет!
Пишу парсер yandex wordstat. Сначала работал без прокси, но после нескольких попыток, как я понял, яндекс меня забанил. Потом подключил прокси, и снова после нескольких попыток меня забанили. Или не забанили, не знаю... Но курл возвращает пустоту. Вот код:
PHP
1
2
3
4
5
6
7
8
9
10
11
12
13
$ch = curl_init($url);
   curl_setopt($ch, CURLOPT_USERAGENT, "User-Agent: Mozilla/4.0 (compatible; MSIE 5.01; Widows NT)");
   curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
   curl_setopt($ch, CURLOPT_REFERER, "http://www.yandex.ru/");
   curl_setopt($ch, CURLOPT_FOLLOWLOCATION , 1);
   curl_setopt($ch, CURLOPT_TIMEOUT, 5);
   curl_setopt($ch, CURLOPT_HEADER, 1);
         
   curl_setopt($ch, CURLOPT_PROXY, "proxyip:port");
   //curl_setopt($ch, CURLOPT_HTTPPROXYTUNNEL, 1); и с этим и без этого не пашет
         
   $m = curl_exec($ch);
        echo $m;
Я было подумал что ему надо может куки отправить, или еще какие заголовки, но дело в том что он заголовки вообще не посылает, просто приходит пустая строка. Прокси не бесплатные, куплены за деньги, и они работают (проверял на сайте myip .ru), но яндексу видимо все равно что это за прокси. В переменной $url тоже верный адрес, выводил его, копировал в строку браузера, и все нормально запускалось.
Вобщем не знаю что этом может быть. Если кто чего знает - поделитесь пожалста.
0
cpp_developer
Эксперт
20123 / 5690 / 1417
Регистрация: 09.04.2010
Сообщений: 22,546
Блог
13.02.2009, 14:32
Ответы с готовыми решениями:

Парсинг статистики wordstat.yandex
Здравствуйте! Не получается обычным скриптом с Curl получить данные wordstat.yandex. Вот сам скрипт: $cookie_file =...

Json parser
Как преобразовать следующий json { "directions": { "A": { "name": "Виталий", "email":...

Google parser
Добрый вечер, читателям форума. Оцените "простой" парсер гугла, скажите, что улучшить, что добавить, может есть альтернативные способы. ...

1
0 / 0 / 1
Регистрация: 10.02.2009
Сообщений: 21
17.02.2009, 12:36
Цитата Сообщение от Furious Посмотреть сообщение
Всем привет!
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
Может так что получиться:

PHP
1
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
raxper
Эксперт
30234 / 6612 / 1498
Регистрация: 28.12.2010
Сообщений: 21,154
Блог
17.02.2009, 12:36
Помогаю со студенческими работами здесь

Php parser M3U
Здравствуйте друзя я хочу создать такой сайт https://canlitv.plus . мне нужен парсер или такой скрипт. можете помочь.

PHP Simple HTML DOM Parser
Не подключается библиотека, на страничке написал 1 строчку с подключением include 'simple_html_dom.php'; запускаю и выдает ерор Parse...

Php simple html dom parser
Здравствуйте, дорогие форумчане. Начинаю изучать библиотеку парсинга php simple html dom parser. Возникло несколько вопросов. Вот...

Библиотека Simple DOM Parser - парсинг
Добрый день. ЕСть страница 4.php: <div id="d1">text-1</div> <div class="d2">text-2</div> <div id="glob-1"> ...

Parser PHP
Всем привет, возникла не большая проблема, никак не могу спарсить значение. <div class="chart__price"> <span...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
2
Ответ Создать тему
Новые блоги и статьи
Камера Toupcam IUA500KMA
Eddy_Em 12.02.2026
Т. к. у всяких "хикроботов" слишком уж мелкий пиксель, для подсмотра в ESPriF они вообще плохо годятся: уже 14 величину можно рассмотреть еле-еле лишь на экспозициях под 3 секунды (а то и больше),. . .
И ясному Солнцу
zbw 12.02.2026
И ясному Солнцу, и светлой Луне. В мире покоя нет и люди не могут жить в тишине. А жить им немного лет.
«Знание-Сила»
zbw 12.02.2026
«Знание-Сила» «Время-Деньги» «Деньги -Пуля»
SDL3 для Web (WebAssembly): Подключение Box2D v3, физика и отрисовка коллайдеров
8Observer8 12.02.2026
Содержание блога Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами и вызывать обработчики событий столкновения. . . .
SDL3 для Web (WebAssembly): Загрузка PNG с прозрачным фоном с помощью SDL_LoadPNG (без SDL3_image)
8Observer8 11.02.2026
Содержание блога Библиотека SDL3 содержит встроенные инструменты для базовой работы с изображениями - без использования библиотеки SDL3_image. Пошагово создадим проект для загрузки изображения. . .
SDL3 для Web (WebAssembly): Загрузка PNG с прозрачным фоном с помощью SDL3_image
8Observer8 10.02.2026
Содержание блога Библиотека SDL3_image содержит инструменты для расширенной работы с изображениями. Пошагово создадим проект для загрузки изображения формата PNG с альфа-каналом (с прозрачным. . .
Установка Qt-версии Lazarus IDE в Debian Trixie Xfce
volvo 10.02.2026
В общем, достали меня глюки IDE Лазаруса, собранной с использованием набора виджетов Gtk2 (конкретно: если набирать текст в редакторе и вызвать подсказку через Ctrl+Space, то после закрытия окошка. . .
SDL3 для Web (WebAssembly): Работа со звуком через SDL3_mixer
8Observer8 08.02.2026
Содержание блога Пошагово создадим проект для загрузки звукового файла и воспроизведения звука с помощью библиотеки SDL3_mixer. Звук будет воспроизводиться по клику мышки по холсту на Desktop и по. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru