Как спарсить номера телефонов если они появляются после нажатии на кнопку?

@Pymaratha · Регистрация: 23.08.2022

Студворк — интернет-сервис помощи студентам

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
import requests
from bs4 import BeautifulSoup
import lxml
import json
num_of_page = 1
 
for i in range(num_of_page):
    url = 'https://blizko.ru/gde_kupit_kvartiru/agentstva_nedvizhimosti?page=' + str(i + 1)
    response = requests.get(url)
    soup = BeautifulSoup(response.text, 'lxml')
    bio = soup.find_all('p', class_='cli-description')
    name = soup.find_all('a', class_='cli-title js-cli-title js-ykr-action')
    number = soup.find_all('span', class_='"phone-')
    for i in range(0, len(bio)):
        print(bio[i].text)
        print('--' + name[i].text)
urr = 'https://blizko.ru/phones?company=13528112&count=3&hit_visits_statistics=true'
phone = requests.get(urr).json()
print(phone)

Есть такой код.
Статичные данные я спарсил, но вот номера...
Я читал что через вкладку Сеть нужно что-то найти и отправить запрос, но я даже эту ссылку не смог найти.
Подскажите как быть, и без selenium/

@Para bellum · 23.08.2022, 15:30

Pymaratha, при запросе на /phones?company=13528112&count=3&hit_visits_statistics=true указавайте HTTP-заголовок x-requested-with со значением XMLHttpRequest.

А Referer и даже CSRF-токен они там не проверяют, но для реалистичности лучше и их отправлять.

Новые блоги и статьи Все статьи Все блоги /
Переходник USB-CAN-GPIO Eddy_Em 20.03.2026 Достаточно давно на работе возникла необходимость в переходнике CAN-USB с гальваноразвязкой, оный и был разработан. Однако, все меня терзала совесть, что аж 48-ногий МК используется так тупо: просто. . .	Оттенки серого Argus19 18.03.2026 Оттенки серого Нашёл в интернете 3 прекрасных модуля: Модуль класса открытия диалога открытия/ сохранения файла на Win32 API; Модуль класса быстрого перекодирования цветного изображения в оттенки. . .	SDL3 для Desktop (MinGW): Рисуем цветные прямоугольники с помощью рисовальщика SDL3 на Си и C++ 8Observer8 17.03.2026 Содержание блога Финальные проекты на Си и на C++: finish-rectangles-sdl3-c. zip finish-rectangles-sdl3-cpp. zip	Символические и жёсткие ссылки в Linux. algri14 15.03.2026 Существует два типа ссылок — символические и жёсткие. Ссылка в Linux — это запись в каталоге, которая может указывать либо на inode «файла-ИСТОЧНИКА», тогда это будет «жёсткая ссылка» (hard link),. . .
[Owen Logic] Поддержание уровня воды в резервуаре количеством включённых насосов: моделирование и выбор регулятора ФедосеевПавел 14.03.2026 Поддержание уровня воды в резервуаре количеством включённых насосов: моделирование и выбор регулятора ВВЕДЕНИЕ Выполняя задание на управление насосной группой заполнения резервуара,. . .	делаю науч статью по влиянию грибов на сукцессию anaschu 13.03.2026 прикрепляю статью	SDL3 для Desktop (MinGW): Создаём пустое окно с нуля для 2D-графики на SDL3, Си и C++ 8Observer8 10.03.2026 Содержание блога Финальные проекты на Си и на C++: hello-sdl3-c. zip hello-sdl3-cpp. zip Результат:	Установка CMake и MinGW 13.1 для сборки С и C++ приложений из консоли и из Qt Creator в EXE 8Observer8 10.03.2026 Содержание блога MinGW - это коллекция инструментов для сборки приложений в EXE. CMake - это система сборки приложений. Здесь описаны базовые шаги для старта программирования с помощью CMake и. . .

@Para bellum 5755 / 4134 / 1508 Регистрация: 06.01.2011 Сообщений: 11,276
	23.08.2022, 15:30
	Pymaratha, при запросе на `/phones?company=13528112&count=3&hit_visits_statistics=true` указавайте HTTP-заголовок `x-requested-with` со значением `XMLHttpRequest`. А Referer и даже CSRF-токен они там не проверяют, но для реалистичности лучше и их отправлять. 0