Парсинг olx.ua Python+requests+bs4

@Nikita_SL · Регистрация: 10.06.2019

Студворк — интернет-сервис помощи студентам

Пытаясь сделать парсер мобильных телефонов на сайте olx.ua столкнулся с проблемой:при отправке ajax запроса мне выдает вместо корректного номера телефона "000 000 000",хотелось бы узнать у знающих людей в чем собственно говоря проблема и как её пофиксить.Желательно в рамках языка программирования Python(без JS и PHP)
Вот код:

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
import requests
from bs4 import BeautifulSoup
url = "https://www.olx.ua/obyavlenie/vaz-2109-IDEcaGq.html"
ajaxUrl = "https://www.olx.ua/ajax/misc/contact/phone/"+ "EcaGq/"
r = requests.get(url)
c = str(r.content)
soup = BeautifulSoup(c,features="lxml")
a = 1
for i in soup.findAll("script"):
    a+=1
    if a == 24:
        token = i.text[36:164]
        break  
r2 = requests.get(ajaxUrl + token)    
print(r2.content)

@m0nte-cr1st0 · 11.06.2019, 14:07

Nikita_SL, была такая тема, ищите

@Nikita_SL · 12.06.2019, 00:58 **[ТС]**

Нашёл и даже читал,именно из-за этого и создал эту тему,потому что прошлые на данный момент уже актуальны

Добавлено через 7 минут
уже не актуальны*

Рыжий Лис · 12.06.2019, 12:44

http-заголовки, куки…

@gresaggr · 19.06.2019, 12:53

Можно добавить заголовки

Python
1
2
3
4
5
6
headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/75.0.3770.100 Safari/537.36',
    'Referer': 'https://www.olx.ua'
}
 
r = requests.get(url, headers=headers)

и тогда можно получить верный phoneToken, но все равно это не даст верный результат:
там pt считается по какой-то хитрой формуле в зависимости от токена.

@SergeyDe · 30.06.2019, 00:18

Сообщение от Nikita_SL

Нашёл и даже читал,именно из-за этого и создал эту тему,потому что прошлые на данный момент уже актуальны

Эту тему смотрели?

Там в общем то рассказано как получить номер телефона.

@Nikita_SL · 01.07.2019, 14:41 **[ТС]**

Смотрел,тема неактуальна

@SergeyDe · 01.07.2019, 17:31

Сообщение от Nikita_SL

Смотрел,тема неактуальна

Все актуально. Все работает ка было описано в той теме.

@Nikita_SL · 03.07.2019, 02:24 **[ТС]**

Хорошо,тогда подскажите ,пожалуйста, почему при использовании моего кода это не работает

Новые блоги и статьи Все статьи Все блоги /
Инструменты COM: Сохранение данный из VARIANT в файл и загрузка из файла в VARIANT bedvit 28.01.2026 Сохранение базовых типов COM и массивов (одномерных или двухмерных) любой вложенности (деревья) в файл, с возможностью выбора алгоритмов сжатия и шифрования. Часть библиотеки BedvitCOM Использованы. . .	Загрузка PNG с альфа-каналом на SDL3 для Android: с помощью SDL_LoadPNG (без SDL3_image) 8Observer8 28.01.2026 Содержание блога SDL3 имеет собственные средства для загрузки и отображения PNG-файлов с альфа-каналом и базовой работы с ними. В этой инструкции используется функция SDL_LoadPNG(), которая. . .	Загрузка PNG с альфа-каналом на SDL3 для Android: с помощью SDL3_image 8Observer8 27.01.2026 Содержание блога SDL3_image - это библиотека для загрузки и работы с изображениями. Эта пошаговая инструкция покажет, как загрузить и вывести на экран смартфона картинку с альфа-каналом, то есть с. . .	влияние грибов на сукцессию anaschu 26.01.2026 Бифуркационные изменения массы гриба происходят тогда, когда мы уменьшаем массу компоста в 10 раз, а скорость прироста биомассы уменьшаем в три раза. Скорость прироста биомассы может уменьшаться за. . .
Воспроизведение звукового файла с помощью SDL3_mixer при касании экрана Android 8Observer8 26.01.2026 Содержание блога SDL3_mixer - это библиотека я для воспроизведения аудио. В отличие от инструкции по добавлению текста код по проигрыванию звука уже содержится в шаблоне примера. Нужно только. . .	Установка Android SDK, NDK, JDK, CMake и т.д. 8Observer8 25.01.2026 Содержание блога Перейдите по ссылке: https:/ / developer. android. com/ studio и в самом низу страницы кликните по архиву "commandlinetools-win-xxxxxx_latest. zip" Извлеките архив и вы увидите. . .	Вывод текста со шрифтом TTF на Android с помощью библиотеки SDL3_ttf 8Observer8 25.01.2026 Содержание блога Если у вас не установлены Android SDK, NDK, JDK, и т. д. то сделайте это по следующей инструкции: Установка Android SDK, NDK, JDK, CMake и т. д. Сборка примера Скачайте. . .	Использование SDL3-callbacks вместо функции main() на Android, Desktop и WebAssembly 8Observer8 24.01.2026 Содержание блога Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .

@m0nte-cr1st0 1043 / 578 / 242 Регистрация: 15.01.2019 Сообщений: 2,178 Записей в блоге: 1
	11.06.2019, 14:07
	Nikita_SL, была такая тема, ищите 0

@Nikita_SL 0 / 0 / 0 Регистрация: 10.06.2019 Сообщений: 4
	12.06.2019, 00:58 [ТС]
	Нашёл и даже читал,именно из-за этого и создал эту тему,потому что прошлые на данный момент уже актуальны Добавлено через 7 минут уже не актуальны* 0

Рыжий Лис Просто Лис 5973 / 3735 / 1099 Регистрация: 17.05.2012 Сообщений: 10,791 Записей в блоге: 9
	12.06.2019, 12:44
	http-заголовки, куки… 0

@Nikita_SL 0 / 0 / 0 Регистрация: 10.06.2019 Сообщений: 4
	01.07.2019, 14:41 [ТС]
	Смотрел,тема неактуальна 0

@Nikita_SL 0 / 0 / 0 Регистрация: 10.06.2019 Сообщений: 4
	03.07.2019, 02:24 [ТС]
	Хорошо,тогда подскажите ,пожалуйста, почему при использовании моего кода это не работает 0