Форум программистов, компьютерный форум, киберфорум
Python: Web
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.75/4: Рейтинг темы: голосов - 4, средняя оценка - 4.75
0 / 0 / 0
Регистрация: 14.08.2016
Сообщений: 1

Скрапинг телефона

14.08.2016, 07:30. Показов 892. Ответов 2
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Здравствуйте. Пытаюсь разобраться в данной теме и возникла следующая проблема: хочу вытащить данные для каждой компании из http://finefoodaustralia.com.a... /?offset=0 Получается все кроме телефона. Телефон вроде подгружается запросом по этому адресу http://finefoodaustralia.com.a... n-ajax.php . Пытался сделать такой же запрос как отправляет браузер, но в ответ вместо номера возвращается только 0. В какую сторону копать?


Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
import requests
headers = {
    'Accept': 'text/html, */*; q=0.01',
    'Accept-Encoding' : 'gzip, deflate',
    'Accept-Language' : 'en-US,en;q=0.5',
    'Connection' : 'keep-alive',
    'Content-Length' : '47',
    'Content-Type': 'application/x-www-form-urlencoded; charset=UTF-8',
    'Cookie' : 'ceg.s=obumzr; _ceg.u=obumzr; _ceir=1; _ga=GA1.3.1763781853.1470916685; __utma=239236244.1763781853.1470916685\
.1471081311.1471093474.4; __utmz=239236244.1470916685.1.1.utmcsr=(direct)|utmccn=(direct)|utmcmd=(none\
); __gads=ID=900cf3e11b6f4b13:T=1470916714:S=ALNI_MarV-BPuroMeyd56BWuVmXm7mGIzA; PHPSESSID=16f0263fbb8f619231dbeb952908145e\
; __utmb=239236244.2.10.1471093475; __utmc=239236244; __utmt_UA-5669303-9=1; _gat_UA-5669303-57=1',
    'Host' : 'finefoodaustralia.com.au',
    'Referer': 'http://finefoodaustralia.com.au/exhibitor/1825-interiors-wholesale/112612',
    'User-Agent':'Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:47.0) Gecko/20100101 Firefox/47.0',
    'X-Requested-With':'XMLHttpRequest'
 
}
res = requests.post('http://finefoodaustralia.com.au/wp-admin/admin-ajax.php', headers = headers)
 
print(res.text)
0
Programming
Эксперт
39485 / 9562 / 3019
Регистрация: 12.04.2006
Сообщений: 41,671
Блог
14.08.2016, 07:30
Ответы с готовыми решениями:

Скрапинг html страницы
Имеется html код такого вида: <input type="hidden" name="token" value="3e2a8f3060996316d028eb1d9e85a519"> Моя задача на...

Скрапинг сайта
Доброго времени суток, можете подсказать как реализовать веб-скрапинг сайта ('http://lekvapteke.ru/medicaments/goldlayn') Пытался так...

Скрапинг в python
Есть код: from bs4 import BeautifulSoup from lxml import html import requests file = open("btc.txt", "r") lines =...

2
2742 / 2341 / 620
Регистрация: 19.03.2012
Сообщений: 8,830
14.08.2016, 09:52
Цитата Сообщение от omax12345 Посмотреть сообщение
Пытался сделать такой же запрос как отправляет браузер, но
Но сделал не такой же. Ты передаешь тучу заголовков из которых, тебе надо передавать только useragent, а данные вообще не посылаешь.
0
1080 / 1007 / 107
Регистрация: 28.02.2010
Сообщений: 2,889
16.08.2016, 14:35
Python
1
2
3
4
5
6
7
8
9
import requests
 
res = requests.post(
  'http://finefoodaustralia.com.au/wp-admin/admin-ajax.php',
  headers = {"User-Agent": "Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:47.0) Gecko/20100101 Firefox/47.0"},
  data = {"action": "exhibitorphone_ajax", "exhibitorid": "18299589"}
)
 
print(res.text)
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
inter-admin
Эксперт
29715 / 6470 / 2152
Регистрация: 06.03.2009
Сообщений: 28,500
Блог
16.08.2016, 14:35
Помогаю со студенческими работами здесь

Веб-Скрапинг на питоне
Добрый день дорогие форумчане. В универе нам задали создать проект на питоне для итоговой аттестации в семестре. И так, нам нужно...

Структуры (cведения об абонентах АТС: ФИО владельца телефона, год установки телефона, номер телефона, тип установки телефона, льгота)
Сведения об абонентах АТС. Структура должна содержать следующую информацию: фамилию, имя, отчество владельца телефона, год установки ...

Скрапинг компаний
Нужно написать скрипт который будет собирать информацию про компинии с города надо название, емейл , url , адресс достаточно города. Есть...

Скрапинг инвентаря CS:GO
Хочу скрапить инвентарь ксго по этому запросу: ...

Веб скрапинг с использованием selenium
Есть файл с большим кол-вом сайтов,где с каждой первой страницы с надо скачать все картинки. Как доработать скрипт,чтобы для каждого сайта...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
3
Ответ Создать тему
Новые блоги и статьи
Символьное дифференцирование
igorrr37 13.02.2026
/ * Логарифм записывается как: (x-2)log(x^2+2) - означает логарифм (x^2+2) по основанию (x-2). Унарный минус обозначается как ! */ #include <iostream> #include <stack> #include <cctype>. . .
Камера Toupcam IUA500KMA
Eddy_Em 12.02.2026
Т. к. у всяких "хикроботов" слишком уж мелкий пиксель, для подсмотра в ESPriF они вообще плохо годятся: уже 14 величину можно рассмотреть еле-еле лишь на экспозициях под 3 секунды (а то и больше),. . .
И ясному Солнцу
zbw 12.02.2026
И ясному Солнцу, и светлой Луне. В мире покоя нет и люди не могут жить в тишине. А жить им немного лет.
«Знание-Сила»
zbw 12.02.2026
«Знание-Сила» «Время-Деньги» «Деньги -Пуля»
SDL3 для Web (WebAssembly): Подключение Box2D v3, физика и отрисовка коллайдеров
8Observer8 12.02.2026
Содержание блога Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами и вызывать обработчики событий столкновения. . . .
SDL3 для Web (WebAssembly): Загрузка PNG с прозрачным фоном с помощью SDL_LoadPNG (без SDL3_image)
8Observer8 11.02.2026
Содержание блога Библиотека SDL3 содержит встроенные инструменты для базовой работы с изображениями - без использования библиотеки SDL3_image. Пошагово создадим проект для загрузки изображения. . .
SDL3 для Web (WebAssembly): Загрузка PNG с прозрачным фоном с помощью SDL3_image
8Observer8 10.02.2026
Содержание блога Библиотека SDL3_image содержит инструменты для расширенной работы с изображениями. Пошагово создадим проект для загрузки изображения формата PNG с альфа-каналом (с прозрачным. . .
Установка Qt-версии Lazarus IDE в Debian Trixie Xfce
volvo 10.02.2026
В общем, достали меня глюки IDE Лазаруса, собранной с использованием набора виджетов Gtk2 (конкретно: если набирать текст в редакторе и вызвать подсказку через Ctrl+Space, то после закрытия окошка. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru