Форум программистов, компьютерный форум, киберфорум
Python: Web
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.62/13: Рейтинг темы: голосов - 13, средняя оценка - 4.62
0 / 0 / 0
Регистрация: 07.08.2020
Сообщений: 9

Изменение региона парсером python

07.08.2020, 18:48. Показов 2865. Ответов 5

Студворк — интернет-сервис помощи студентам
Доброго времени суток!

Хотелось бы извлечь некоторую информацию с сайта АТБ: https://www.atb.su/
При обращении проги к сайту я получаю данные для Москвы. Я могу изменить регион самостоятельно, но в URL это не отразится.
Как можно получить данные для желаемого региона? Что нужно прописать в коде? Пишу на python
Буду благодарен за ответы
0
Лучшие ответы (1)
Programming
Эксперт
39485 / 9562 / 3019
Регистрация: 12.04.2006
Сообщений: 41,671
Блог
07.08.2020, 18:48
Ответы с готовыми решениями:

Изменение кода запроса с Python 2 на Python 3
Доброго времени суток. Я пишу программу и для её реализации мне необходимо, чтобы она делала запрос на гугл сервер и возвращала мне...

Изменение цвета региона при нажатии на него
Помогите, не работает программа, не могу изменить цвет региона при нажатии на него P.S. Это Active X Option Explicit Private...

Подсветка региона карты при наведении на название региона в списке
Всем привет, делаю интерактивную карту. Нарезал карту России на регионы с помощью shape="poly" coords="36.........., теперь...

5
5025 / 1054 / 147
Регистрация: 29.01.2013
Сообщений: 6,176
08.08.2020, 00:45
что именно вы пишете на Python? Вы парсите сайт?
0
Автоматизируй это!
Эксперт Python
 Аватар для Welemir1
7390 / 4817 / 1246
Регистрация: 30.03.2015
Сообщений: 13,663
Записей в блоге: 29
10.08.2020, 06:53
Цитата Сообщение от Nikita_Lev Посмотреть сообщение
Как можно получить данные для желаемого региона? Что нужно прописать в коде? Пишу на python
чтобы скрапить данные нужно во многом разбираться. Например надо посмотреть какие именно запросы уходят с сайта при изменении региона. Повторить их и получить нужный результат. Начни с этого
0
0 / 0 / 0
Регистрация: 07.08.2020
Сообщений: 9
14.08.2020, 12:47  [ТС]
Alli_Lupin,
Да, беру данные текущего курса USD, но для Москвы, а не для желаемого региона

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
import requests
from bs4 import BeautifulSoup
 
CSV = 'cars.csv'
HEADERS = {
    'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.105 Safari/537.36',
    'accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9'}
URL='https://www.atb.su/'
 
def get_page(URL):
    page=requests.get(URL, headers=HEADERS)
    page.encoding='utf-8'
    return page
 
html=get_page(URL)
if html.status_code==200:
    soup=BeautifulSoup(html.text, 'html.parser')
    items=soup.find_all('div', class_='currency_block-table-td')
    print(f'Покупка USD: {items[6].text} \nПродажа USD: {items[7].text}')
else:
    print('Ошибка!')
0
Автоматизируй это!
Эксперт Python
 Аватар для Welemir1
7390 / 4817 / 1246
Регистрация: 30.03.2015
Сообщений: 13,663
Записей в блоге: 29
14.08.2020, 12:51
Nikita_Lev, ну там не апи простое, а интерактивный сайт, тебе придется использовать селениум, чтобы кликами выбирать регион или переходить на страницу нужного региона и брать данные. Думаю где то есть апи получения курсов валют, чтобы так не мучаться
1
Эксперт Python
 Аватар для АмигоСП
295 / 108 / 57
Регистрация: 07.12.2016
Сообщений: 209
14.08.2020, 14:30
Лучший ответ Сообщение было отмечено Nikita_Lev как решение

Решение

Nikita_Lev, Изучайте запросы в браузере. Ниже пример результатов для Хабаровска:
Python
1
2
3
4
HEADERS = {
    'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.105 Safari/537.36',
    'accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9',
    'Cookie':'BITRIX_SM_CITY=1341'}
Для остальных городов нужно менять значение BITRIX_SM_CITY
1
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
inter-admin
Эксперт
29715 / 6470 / 2152
Регистрация: 06.03.2009
Сообщений: 28,500
Блог
14.08.2020, 14:30
Помогаю со студенческими работами здесь

Помощь с парсером
Криво написал небольшой парсер.Нужно выдергивать с сайта описание товара.Работает, в принципе, как надо,но есть проблемы с кодировкой....

Проблема с парсером
В общем проблема в следующем. Есть сайт со списком тв программ. Парсить оттуда список не представляет сложности но список не совсем...

Помощь с парсером
Мне нужно добавить на сайт туеву тучу товаров.Вручную,конечно же влом,поэтому решил написать что-то вроде парсера.Допустим есть сайт и с...

Проблемы с парсером
Пытаюсь сделать парсер который будит извлекать блок с сайта, но почему ошибка. Вот код: <?php ...

Проблема с парсером
Надо написать парсер на php, с яндексом работает нормально, но youtube.com, например не парсит. код: include 'curl_query.php'; ...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
6
Ответ Создать тему
Новые блоги и статьи
Новый ноутбук
volvo 07.12.2025
Всем привет. По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне: Ryzen 5 7533HS 64 Gb DDR5 1Tb NVMe 16" Full HD Display Win11 Pro
Музыка, написанная Искусственным Интеллектом
volvo 04.12.2025
Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .
От async/await к виртуальным потокам в Python
IndentationError 23.11.2025
Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .
Поиск "дружественных имён" СОМ портов
Argus19 22.11.2025
Поиск "дружественных имён" СОМ портов На странице: https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/ нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .
Сколько Государство потратило денег на меня, обеспечивая инсулином.
Programma_Boinc 20.11.2025
Сколько Государство потратило денег на меня, обеспечивая инсулином. Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов. . . .
Ломающие изменения в C#.NStar Alpha
Etyuhibosecyu 20.11.2025
Уже можно не только тестировать, но и пользоваться C#. NStar - писать оконные приложения, содержащие надписи, кнопки, текстовые поля и даже изображения, например, моя игра "Три в ряд" написана на этом. . .
Мысли в слух
kumehtar 18.11.2025
Кстати, совсем недавно имел разговор на тему медитаций с людьми. И обнаружил, что они вообще не понимают что такое медитация и зачем она нужна. Самые базовые вещи. Для них это - когда просто люди. . .
Создание Single Page Application на фреймах
krapotkin 16.11.2025
Статья исключительно для начинающих. Подходы оригинальностью не блещут. В век Веб все очень привыкли к дизайну Single-Page-Application . Быстренько разберем подход "на фреймах". Мы делаем одну. . .
Фото: Daniel Greenwood
kumehtar 13.11.2025
Расскажи мне о Мире, бродяга
kumehtar 12.11.2025
— Расскажи мне о Мире, бродяга, Ты же видел моря и метели. Как сменялись короны и стяги, Как эпохи стрелою летели. - Этот мир — это крылья и горы, Снег и пламя, любовь и тревоги, И бескрайние. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2025, CyberForum.ru