Форум программистов, компьютерный форум, киберфорум
Python: Web
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.75/4: Рейтинг темы: голосов - 4, средняя оценка - 4.75
0 / 0 / 0
Регистрация: 14.08.2016
Сообщений: 1

Скрапинг телефона

14.08.2016, 07:30. Показов 899. Ответов 2
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Здравствуйте. Пытаюсь разобраться в данной теме и возникла следующая проблема: хочу вытащить данные для каждой компании из http://finefoodaustralia.com.a... /?offset=0 Получается все кроме телефона. Телефон вроде подгружается запросом по этому адресу http://finefoodaustralia.com.a... n-ajax.php . Пытался сделать такой же запрос как отправляет браузер, но в ответ вместо номера возвращается только 0. В какую сторону копать?


Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
import requests
headers = {
    'Accept': 'text/html, */*; q=0.01',
    'Accept-Encoding' : 'gzip, deflate',
    'Accept-Language' : 'en-US,en;q=0.5',
    'Connection' : 'keep-alive',
    'Content-Length' : '47',
    'Content-Type': 'application/x-www-form-urlencoded; charset=UTF-8',
    'Cookie' : 'ceg.s=obumzr; _ceg.u=obumzr; _ceir=1; _ga=GA1.3.1763781853.1470916685; __utma=239236244.1763781853.1470916685\
.1471081311.1471093474.4; __utmz=239236244.1470916685.1.1.utmcsr=(direct)|utmccn=(direct)|utmcmd=(none\
); __gads=ID=900cf3e11b6f4b13:T=1470916714:S=ALNI_MarV-BPuroMeyd56BWuVmXm7mGIzA; PHPSESSID=16f0263fbb8f619231dbeb952908145e\
; __utmb=239236244.2.10.1471093475; __utmc=239236244; __utmt_UA-5669303-9=1; _gat_UA-5669303-57=1',
    'Host' : 'finefoodaustralia.com.au',
    'Referer': 'http://finefoodaustralia.com.au/exhibitor/1825-interiors-wholesale/112612',
    'User-Agent':'Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:47.0) Gecko/20100101 Firefox/47.0',
    'X-Requested-With':'XMLHttpRequest'
 
}
res = requests.post('http://finefoodaustralia.com.au/wp-admin/admin-ajax.php', headers = headers)
 
print(res.text)
0
Programming
Эксперт
39485 / 9562 / 3019
Регистрация: 12.04.2006
Сообщений: 41,671
Блог
14.08.2016, 07:30
Ответы с готовыми решениями:

Скрапинг html страницы
Имеется html код такого вида: <input type="hidden" name="token" value="3e2a8f3060996316d028eb1d9e85a519"> Моя задача на...

Скрапинг сайта
Доброго времени суток, можете подсказать как реализовать веб-скрапинг сайта ('http://lekvapteke.ru/medicaments/goldlayn') Пытался так...

Скрапинг в python
Есть код: from bs4 import BeautifulSoup from lxml import html import requests file = open("btc.txt", "r") lines =...

2
2742 / 2341 / 620
Регистрация: 19.03.2012
Сообщений: 8,830
14.08.2016, 09:52
Цитата Сообщение от omax12345 Посмотреть сообщение
Пытался сделать такой же запрос как отправляет браузер, но
Но сделал не такой же. Ты передаешь тучу заголовков из которых, тебе надо передавать только useragent, а данные вообще не посылаешь.
0
1080 / 1007 / 107
Регистрация: 28.02.2010
Сообщений: 2,889
16.08.2016, 14:35
Python
1
2
3
4
5
6
7
8
9
import requests
 
res = requests.post(
  'http://finefoodaustralia.com.au/wp-admin/admin-ajax.php',
  headers = {"User-Agent": "Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:47.0) Gecko/20100101 Firefox/47.0"},
  data = {"action": "exhibitorphone_ajax", "exhibitorid": "18299589"}
)
 
print(res.text)
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
inter-admin
Эксперт
29715 / 6470 / 2152
Регистрация: 06.03.2009
Сообщений: 28,500
Блог
16.08.2016, 14:35
Помогаю со студенческими работами здесь

Веб-Скрапинг на питоне
Добрый день дорогие форумчане. В универе нам задали создать проект на питоне для итоговой аттестации в семестре. И так, нам нужно...

Структуры (cведения об абонентах АТС: ФИО владельца телефона, год установки телефона, номер телефона, тип установки телефона, льгота)
Сведения об абонентах АТС. Структура должна содержать следующую информацию: фамилию, имя, отчество владельца телефона, год установки ...

Скрапинг компаний
Нужно написать скрипт который будет собирать информацию про компинии с города надо название, емейл , url , адресс достаточно города. Есть...

Скрапинг инвентаря CS:GO
Хочу скрапить инвентарь ксго по этому запросу: ...

Веб скрапинг с использованием selenium
Есть файл с большим кол-вом сайтов,где с каждой первой страницы с надо скачать все картинки. Как доработать скрипт,чтобы для каждого сайта...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
3
Ответ Создать тему
Новые блоги и статьи
Модель ЗдрввоСохранения 7: больше работников, больше ресурсов.
anaschu 08.04.2026
работников и заданий может быть сколько угодно, но настроено всё так, что используется пока что только 20%
Дальние перспективы сервера - слоя сети с космологическим дизайном интефейса карты и логики.
Hrethgir 07.04.2026
Дальнейшее ближайшее планирование вывело к размышлениям над дальними перспективами. И вот тут может быть даже будут нужны оценки специалистов, так как в дальних перспективах всё может очень сильно. . .
Горе от ума
kumehtar 07.04.2026
Эта мне ментальная установка, что вот прямо сейчас, мол, мне для полного счастья не хватает (нужное вписать), и когда я этого достигну - тогда и полный кайф. Одна из самых сильных ловушек на пути. . . .
Использование значений реквизитов справочника в документе, с определенными условиями и правами
Maks 07.04.2026
1. Контроль срока действия договора Алгоритм из решения ниже реализован на примере нетипового документа "ЗаявкаНаРаботу", разработанного в конфигурации КА2. Задача: уведомлять пользователя, если. . .
Доступность команды формы по условию
Maks 07.04.2026
Алгоритм из решения ниже реализован на примере нетипового документа "СписаниеМатериалов", разработанного в конфигурации КА2. Задача: сделать доступной кнопку (команда формы "ЗавершитьСписание") при. . .
Уведомление о неверно выбранном значении справочника
Maks 06.04.2026
Алгоритм из решения ниже реализован на примере нетипового документа "НарядПутевка", разработанного в конфигурации КА2. Задача: уведомлять пользователя, если в документе выбран неверный склад. . .
Установка Qt Creator для C и C++: ставим среду, CMake и MinGW без фреймворка Qt
8Observer8 05.04.2026
Среду разработки Qt Creator можно установить без фреймворка Qt. Есть отдельный репозиторий для этой среды: https:/ / github. com/ qt-creator/ qt-creator, где можно скачать установщик, на вкладке Releases:. . .
AkelPad-скрипты, структуры, и немного лирики..
testuser2 05.04.2026
Такая программа, как AkelPad существует уже давно, и также давно существуют скрипты под нее. Тем не менее, прога живет, периодически что-то не спеша дополняется, улучшается. Что меня в первую очередь. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru