Как парсить сайт с динамической подгрузкой через скрипты?

@kalambek · Регистрация: 07.04.2015

Студворк — интернет-сервис помощи студентам

Сайт: https://www.soccerstand.com/ru... ch-summary

Необходимо получить значения коэффициентов с этого сайта (1.73, 4.08, 4.92). Коэффициенты подгружаются динамически.
Я нашёл запрос по которому сайт получает эти самые коэффициенты (https://d.soccerstand.com/ru/x... _UZQNJWWl_), но при попытке перейти по ссылке вылазит ошибка: 401 Unauthorized.
Подскажите, как всё таки можно получить значения коэффициентов?

Python
1
2
3
4
5
6
import requests
from bs4 import BeautifulSoup
 
response = requests.get('https://d.soccerstand.com/ru/x/feed/df_dos_1_UZQNJWWl_')
data = response.json()
print(data)

@Welemir1 · 30.11.2021, 16:46

Сообщение от kalambek

Подскажите, как всё таки можно получить значения коэффициентов?

посмотреть какие данные туда передаются и подсунуть их.

@kalambek · 30.11.2021, 16:50 **[ТС]**

Welemir1, а как это реализовать посредством requests и bs4?

@Welemir1 · 30.11.2021, 16:53

kalambek, судя по вопросу ты не стал смотреть что туда уходит) Использовать просто -смотрим что нужно отправлять и отправляем реквестом.

Если не помогает то берем селениум.

@kalambek · 30.11.2021, 16:58 **[ТС]**

Welemir1, я вообще не понял суть ответа. На какие данные нужно смотреть и куда подсовывать?

@Welemir1 · 30.11.2021, 17:06

kalambek, а как ты нашел что он шлет запрос на

Сообщение от kalambek

https://d.soccerstand.com/ru/x/feed/df_dos_1_UZQNJWWl_

???

вот там же и смотреть с какими полями и с каким телом этот запрос идет и попробовать его повторить. Подсовывать в соответствующие хедеры и тело запроса реквестс.

Иначе - селениум, динамику через реквестс не попарсить.

Так понятна суь ответа?

@kalambek · 30.11.2021, 17:18 **[ТС]**

Welemir1, не понятна. Я этот запрос с трудом нашёл через поиск по словам в network браузера. Какие поля там за что отвечают и куда их "подсовывать" мне абсолютно неизвестно.

@Welemir1 · 30.11.2021, 17:45

kalambek, погоди, то есть ты собрался чего то там парсить не понимая как все это работая и не читая документации тех же requests?

Python
1
2
3
4
5
6
7
8
>>> import requests
>>> url = 'https://d.soccerstand.com/ru/x/feed/df_dos_1_UZQNJWWl_'
>>> user_agent='Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/15.1 Safari/605.1.15'
>>> x_fsign='SW9D1eZo'
>>> headers = {'User-Agent':user_agent, 'x-fsign':x_fsign}
>>> t=requests.get(url, headers=headers)
>>> t.text
'MX÷453¬MI÷{"453":["1.73","4.08","4.92"]}¬MJ÷{"453":["1.81","4.02","4.46"]}¬.......

@kalambek · 01.12.2021, 00:17 **[ТС]**

Welemir1, Спасибо! Когда ты новичок не так уж и просто найти даже в документации то, что тебе нужно.

Новые блоги и статьи Все статьи Все блоги /
Новый ноутбук volvo 07.12.2025 Всем привет. По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне: Ryzen 5 7533HS 64 Gb DDR5 1Tb NVMe 16" Full HD Display Win11 Pro	Музыка, написанная Искусственным Интеллектом volvo 04.12.2025 Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .	От async/await к виртуальным потокам в Python IndentationError 23.11.2025 Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .	Поиск "дружественных имён" СОМ портов Argus19 22.11.2025 Поиск "дружественных имён" СОМ портов На странице: https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/ нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .	Сколько Государство потратило денег на меня, обеспечивая инсулином. Programma_Boinc 20.11.2025 Сколько Государство потратило денег на меня, обеспечивая инсулином. Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов. . . .
Ломающие изменения в C#.NStar Alpha Etyuhibosecyu 20.11.2025 Уже можно не только тестировать, но и пользоваться C#. NStar - писать оконные приложения, содержащие надписи, кнопки, текстовые поля и даже изображения, например, моя игра "Три в ряд" написана на этом. . .	Мысли в слух kumehtar 18.11.2025 Кстати, совсем недавно имел разговор на тему медитаций с людьми. И обнаружил, что они вообще не понимают что такое медитация и зачем она нужна. Самые базовые вещи. Для них это - когда просто люди. . .	Создание Single Page Application на фреймах krapotkin 16.11.2025 Статья исключительно для начинающих. Подходы оригинальностью не блещут. В век Веб все очень привыкли к дизайну Single-Page-Application . Быстренько разберем подход "на фреймах". Мы делаем одну. . .	Фото: Daniel Greenwood kumehtar 13.11.2025	Расскажи мне о Мире, бродяга kumehtar 12.11.2025 — Расскажи мне о Мире, бродяга, Ты же видел моря и метели. Как сменялись короны и стяги, Как эпохи стрелою летели. - Этот мир — это крылья и горы, Снег и пламя, любовь и тревоги, И бескрайние. . .

@kalambek 0 / 0 / 0 Регистрация: 07.04.2015 Сообщений: 102
	30.11.2021, 16:50 [ТС]
	Welemir1, а как это реализовать посредством requests и bs4? 0

@Welemir1 Автоматизируй это! 7390 / 4817 / 1246 Регистрация: 30.03.2015 Сообщений: 13,663 Записей в блоге: 29
	30.11.2021, 16:53
	kalambek, судя по вопросу ты не стал смотреть что туда уходит) Использовать просто -смотрим что нужно отправлять и отправляем реквестом. Если не помогает то берем селениум. 0

@kalambek 0 / 0 / 0 Регистрация: 07.04.2015 Сообщений: 102
	30.11.2021, 16:58 [ТС]
	Welemir1, я вообще не понял суть ответа. На какие данные нужно смотреть и куда подсовывать? 0

@kalambek 0 / 0 / 0 Регистрация: 07.04.2015 Сообщений: 102
	30.11.2021, 17:18 [ТС]
	Welemir1, не понятна. Я этот запрос с трудом нашёл через поиск по словам в network браузера. Какие поля там за что отвечают и куда их "подсовывать" мне абсолютно неизвестно. 0

@kalambek 0 / 0 / 0 Регистрация: 07.04.2015 Сообщений: 102
	01.12.2021, 00:17 [ТС]
	Welemir1, Спасибо! Когда ты новичок не так уж и просто найти даже в документации то, что тебе нужно. 0