Как использовать urllib в post запросах. Ошибка выходит

@dmitrymakarow · Регистрация: 18.08.2010

Студворк — интернет-сервис помощи студентам

Всем привет.

Вот нужно чекать ip на blacklist.

Пытаюсь получить страницу с ответом. Но получаю ответ не дождавшись окончательной загрузки.

Вот код:

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
  import urllib
    import urllib2
    
    headers = {'User-Agent' : 'Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 6.0)'}
    values = {'fd%5Bt%5D':'dnsbl-lookup','fd%5Bq%5D':'117.168.58.63', 'fd%5Bsubmit%5D':'Send'}
    
    
    data = urllib.urlencode(values)
    
    
    req = urllib2.Request('http://multirbl.valli.org/index.php',data, headers)
    response = urllib2.urlopen(req)
    print(response.read())

Вот что как страницу получаю в итоге - http://multirbl.valli.org/.
А нужно - http://multirbl.valli.org/dnsb... 58.63.html

Как получить полную страницу, когда закончат свою работу все скрипты?

Спасибо

@alex925 · 21.04.2015, 17:11

dmitrymakarow, Если страница генерируется с помощью js, тебе надо использовать совсем другие инструменты.
На пример: http://jeanphix.me/Ghost.py/

@dmitrymakarow · 21.04.2015, 17:17 **[ТС]**

Это наподобие селениум, эмуляция браузера?
И смогу ли в 100 потоков чекать? Проксей много 8 млн...)

Спасибо

Добавлено через 46 секунд

Сообщение от alex925

dmitrymakarow, Если страница генерируется с помощью js, тебе надо использовать совсем другие инструменты.
На пример: http://jeanphix.me/Ghost.py/

Это наподобие селениум, эмуляция браузера?
И смогу ли в 100 потоков чекать? Проксей много 8 млн...)

Спасибо

@alex925 · 21.04.2015, 17:43

Сообщение от dmitrymakarow

Это наподобие селениум, эмуляция браузера

Не совсем, selenium это способ управлять каким либо из браузеров, а ghost это реализация клиента webkit. То есть он может не только получать данные по http, но и выполнять js код.

Новые блоги и статьи Все статьи Все блоги /
Подключение Box2D v3 к SDL3 для Android: физика и отрисовка коллайдеров 8Observer8 29.01.2026 Содержание блога Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами. Версия v3 была полностью переписана на Си, в. . .	Инструменты COM: Сохранение данный из VARIANT в файл и загрузка из файла в VARIANT bedvit 28.01.2026 Сохранение базовых типов COM и массивов (одномерных или двухмерных) любой вложенности (деревья) в файл, с возможностью выбора алгоритмов сжатия и шифрования. Часть библиотеки BedvitCOM Использованы. . .	Загрузка PNG с альфа-каналом на SDL3 для Android: с помощью SDL_LoadPNG (без SDL3_image) 8Observer8 28.01.2026 Содержание блога SDL3 имеет собственные средства для загрузки и отображения PNG-файлов с альфа-каналом и базовой работы с ними. В этой инструкции используется функция SDL_LoadPNG(), которая. . .	Загрузка PNG с альфа-каналом на SDL3 для Android: с помощью SDL3_image 8Observer8 27.01.2026 Содержание блога SDL3_image - это библиотека для загрузки и работы с изображениями. Эта пошаговая инструкция покажет, как загрузить и вывести на экран смартфона картинку с альфа-каналом, то есть с. . .
Влияние грибов на сукцессию anaschu 26.01.2026 Бифуркационные изменения массы гриба происходят тогда, когда мы уменьшаем массу компоста в 10 раз, а скорость прироста биомассы уменьшаем в три раза. Скорость прироста биомассы может уменьшаться за. . .	Воспроизведение звукового файла с помощью SDL3_mixer при касании экрана Android 8Observer8 26.01.2026 Содержание блога SDL3_mixer - это библиотека я для воспроизведения аудио. В отличие от инструкции по добавлению текста код по проигрыванию звука уже содержится в шаблоне примера. Нужно только. . .	Установка Android SDK, NDK, JDK, CMake и т.д. 8Observer8 25.01.2026 Содержание блога Перейдите по ссылке: https:/ / developer. android. com/ studio и в самом низу страницы кликните по архиву "commandlinetools-win-xxxxxx_latest. zip" Извлеките архив и вы увидите. . .	Вывод текста со шрифтом TTF на Android с помощью библиотеки SDL3_ttf 8Observer8 25.01.2026 Содержание блога Если у вас не установлены Android SDK, NDK, JDK, и т. д. то сделайте это по следующей инструкции: Установка Android SDK, NDK, JDK, CMake и т. д. Сборка примера Скачайте. . .

@alex925 2742 / 2341 / 620 Регистрация: 19.03.2012 Сообщений: 8,830
	21.04.2015, 17:11
	dmitrymakarow, Если страница генерируется с помощью js, тебе надо использовать совсем другие инструменты. На пример: http://jeanphix.me/Ghost.py/ 1