Парсер авито

22.04.2021, 21:36. Показов 4352. Ответов 0

Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам

Я новичок в деле, строго не судите.
Делаю парсер для авито, просто ради практики, столкнулся с такой проблемой:
нахожу количество единиц товара, которое отображается на странице: pcs = soup.find('span', {'data-marker': 'page-title/count'}).text,
вывожу ссылку на данную страницу, и вижу что значения не соответствуют, в переменной 4, а по факту(по ссылке) только 3.
Причем если изменить параметр поиска, то в некоторых случаях находит верно, в некоторых разница от 1 до примерно 15-ти))

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
import requests
from bs4 import BeautifulSoup
 
 
url = 'https://www.avito.ru/ufa'
headers = {
    "Accept": "*/*",
    "Accept-Language": "ru-RU,ru;q=0.8,en-US;q=0.5,en;q=0.3",
    "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:84.0) Gecko/20100101 Firefox/84.0",
}
 
#search = 'видеокарта geforce'
search = 'видеокарта radeon'
 
resp = requests.get(url, headers=headers, params={'bt': 1, 'pmax': '30000', 'pmin': '10000', 'q': search, 's': '2', 'view': 'gallery'})
soup = BeautifulSoup(resp.text, 'lxml')
# find title page
title = soup.h1.get_text()
print('Заголовок страницы:', title)
# total pages
try:
    str = soup.find('span', {'data-marker': 'pagination-button/next'}).previous_element
except:
    str = 1
print('Количество страниц', str)
# total pcs
pcs = soup.find('span', {'data-marker': 'page-title/count'}).text
print('Количество найденных позиций', pcs)
print('Ссылка со всеми параметрами:\n', resp.url)

cpp_developer

Эксперт

20123 / 5690 / 1417

Регистрация: 09.04.2010

Сообщений: 22,546

Блог

22.04.2021, 21:36

Ответы с готовыми решениями:

Парсер авито
Всем привет, пытаюсь получить количество страниц с авито. То что пытаюсь сделать привел ниже, при печати выдает None. Что я не так делаю?...

Подскажите профану по боту для Авито
Ребят, сильно не пинайте, хотел задать вопрос знающим людям. Реально ли сделать бота для телеграма, который бы смог отправлять сообщения на...

Парсер с Авито
Пробую писать парсер с авито(вакансии) своего города. Набросал такой код используя библиотеку PHP Simple HTML DOM Parser. ...

Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.

raxper

Эксперт

30234 / 6612 / 1498

Регистрация: 28.12.2010

Сообщений: 21,154

Блог

22.04.2021, 21:36

Помогаю со студенческими работами здесь

Парсер для авито
Всем привет!! Хотел спросить может быть у кого есть код для сайта парсера авито?

Нужен парсер Авито
Всем привет. Необходимо максимально быстро получать номера с авито по конкретной категории. Подскажите как это можно сделать? ...

За сколько запросов авито банит парсер
Всем привет. За сколько запросов авито может забанить парсер? Планируется примерно 500 запросов в день. Не за один раз конечно.

ПК с Авито
Собираюсь взять б/у пк с Авито за 25990, вот его характеристики: Intel Xeon E5-2689 Socket 2011 GIGABYTE GTX 1060 3Gb Материнская...

Оцените пк с авито
Ребят, скажите какое пк купить вы бы посоветовали? 1 вариант неплох, 2 тоже, но еще купить моник. Если останется возможно куплю ссд...

Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:

Новые блоги и статьи Все статьи Все блоги /
Модель микоризы: классовый агентный подход 3 anaschu 06.01.2026 aa0a7f55b50dd51c5ec569d2d10c54f6/ O1rJuneU_ls https:/ / vkvideo. ru/ video-115721503_456239114	Owen Logic: О недопустимости использования связки «аналоговый ПИД» + RegKZR ФедосеевПавел 06.01.2026 Owen Logic: О недопустимости использования связки «аналоговый ПИД» + RegKZR ВВЕДЕНИЕ Введу сокращения: аналоговый ПИД — ПИД регулятор с управляющим выходом в виде числа в диапазоне от 0% до. . .	Модель микоризы: классовый агентный подход 2 anaschu 06.01.2026 репозиторий https:/ / github. com/ shumilovas/ fungi ветка по-частям. коммит Create переделка под биомассу. txt вход sc, но sm считается внутри мицелия. кстати, обьем тоже должен там считаться. . . .	Расчёт токов в цепи постоянного тока igorrr37 05.01.2026 / * Дана цепь постоянного тока с сопротивлениями и напряжениями. Надо найти токи в ветвях. Программа составляет систему уравнений по 1 и 2 законам Кирхгофа и решает её. Последовательность действий:. . .
Новый CodeBlocs. Версия 25.03 palva 04.01.2026 Оказывается, недавно вышла новая версия CodeBlocks за номером 25. 03. Когда-то давно я возился с только что вышедшей тогда версией 20. 03. С тех пор я давно снёс всё с компьютера и забыл. Теперь. . .	Модель микоризы: классовый агентный подход anaschu 02.01.2026 Раньше это было два гриба и бактерия. Теперь три гриба, растение. И на уровне агентов добавится между грибами или бактериями взаимодействий. До того я пробовал подход через многомерные массивы,. . .	Советы по крайней бережливости. Внимание, это ОЧЕНЬ длинный пост. Programma_Boinc 28.12.2025 Советы по крайней бережливости. Внимание, это ОЧЕНЬ длинный пост. Налог на собак: https:/ / ********/ gallery/ V06K53e Финансовый отчет в Excel: https:/ / ********/ gallery/ bKBkQFf Пост отсюда. . .	Кто-нибудь знает, где можно бесплатно получить настольный компьютер или ноутбук? США. Programma_Boinc 26.12.2025 Нашел на реддите интересную статью под названием Anyone know where to get a free Desktop or Laptop? Ниже её машинный перевод. После долгих разбирательств я наконец-то вернула себе. . .

Наверх