Форум программистов, компьютерный форум, киберфорум
Python: Web
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск  
 
 
Рейтинг 4.64/25: Рейтинг темы: голосов - 25, средняя оценка - 4.64
 Аватар для supmener
87 / 95 / 15
Регистрация: 26.06.2013
Сообщений: 4,755

Парсер olx.ua на lxml

30.08.2020, 13:51. Показов 5790. Ответов 21
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Изучаю видео
Bебинар “Парсинг HTML на Python“ https://www.youtube.com/watch?v=n6x1pzlRK8A
То, о чем задаю вопрос, показано примерно на времени 34 минуты 15 секунд.
Не выводятся разделители, как показано на скриншоте, при работе цикла. Такое впечатление, что цикл вообще не запускается. Показывается текст параграфов, который вроде таким же образом выводился до добавления циклического кода.
Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
#Сверка по времени 
 
import win_unicode_console
win_unicode_console.enable()
import time
import requests
import lxml.html
 
class OlxParser:
    def __init__(self, base_url):
        self.base_url = base_url
        self.last_time = ''
        
    def get_page(self):
        
        try:
            res = requests.get(self.base_url)
        except requests.ConnectionError:
            return
            
        if res.status_code < 400:
            return res.content
 
    def parse(self, html):
        html_tree = lxml.html.fromstring(html)     
        path = ".//table[@id='offers_table']//td[@class='offer  ']"
        last_offer = html_tree.xpath(path)[0]
        print(last_offer.text_content())
        
        link = last_offer.xpath('.//a')[1].get('href')
        #print(link)
        
        cur_time = last_offer.xpath('./table/tbody/tr[2]//p')
        #print(cur_time)
        for p in cur_time: #00:37:34
            print('---')
            print(p.text_content)
        
 
    def run(self):
        pass
 
        
if __name__ == "__main__":    
    parser = OlxParser('https://www.olx.ua/list/')    
    page = parser.get_page()
    parser.parse(page)
Миниатюры
Парсер olx.ua на lxml  
0
IT_Exp
Эксперт
34794 / 4073 / 2104
Регистрация: 17.06.2006
Сообщений: 32,602
Блог
30.08.2020, 13:51
Ответы с готовыми решениями:

Парсер olx, поиск номеров
Доброго времени! Никто в последнее время не парсил olx.ua? Проблема парсинга номеров телефона без селениума, раньше делал по токену...

Парсер OLX, идеи реализации
Народ, подскажите пожалуйста подход к парсингу olx и похожих сайтов. Сайт все запросы отвергает, может кто-то знает , поделитесь).

Парсер (lxml,urllib) запускается без ошибки, но не записывает данные в csv
Наткнулся в интернете на парсер. При запуске никаких ошибок не возникает, но и полезных действий не происходит (данные в файл не...

21
Просто Лис
Эксперт Python
 Аватар для Рыжий Лис
5973 / 3735 / 1099
Регистрация: 17.05.2012
Сообщений: 10,791
Записей в блоге: 9
12.09.2020, 13:49
Студворк — интернет-сервис помощи студентам
Файл можно называть как угодно.
1
0 / 0 / 0
Регистрация: 28.06.2021
Сообщений: 1
28.06.2021, 13:09
Кому нужен хороший работающий парсер OLX, советую посмотреть все его характеристики тут
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
BasicMan
Эксперт
29316 / 5623 / 2384
Регистрация: 17.02.2009
Сообщений: 30,364
Блог
28.06.2021, 13:09

Капча на OLX.ua
Всем привет! Довольно интересная тема - это отправка сообщений авторам объявлений на OLX.ua. Проблема состоит лишь в том что картинка капчи...

Номер телефона на olx
Здравствуйте. На olx номер телефона показывается после клику по &quot;0xxx xxxxxx Показать&quot;. Порывшись в коде, нашел скрипт, который это...

Категории как на olx
Хочу сделать доску объявлений,но столкнулчя с проблемой вывода категорий в шаблоне.Короче говоря нужно сделать так:Когда подкатегорий очень...

запрос на новый OLX
Обновили сайт, пробовал синапс - не выдает редирект в заголовках и не дает исходную страницу Пробовал инди - Error connecting with SSL. ...

Код для парсинга Olx
есть код для парсинга олх @bot.message_handler(commands=) def ask(message): input_ = bot.send_message(message.chat.id,...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
22
Ответ Создать тему
Новые блоги и статьи
Мобильное приложение ColorStep
pavlinmavlin 17.09.2026
Реализовал приложение Красный, Зеленый, Синий в Unity3d + c#. Название изменил на ColorStep. Приложение прошло модерацию и теперь доступно для скачивания. Делал его сам, шаг за шагом — и вот,. . .
Запрет дублирования строк в табличной части
Maks 13.09.2026
Реализация из решения ниже выполнена на нетиповом справочнике "Нормы ТО" с табличной часть "Виды ТО", разработанного в КА2, со следующими реквизитами: - ВидТО (СправочникСсылка. ВидыТО); - ВидГСМ. . .
Скрипты Tampermonkey для CyberForum, ChatGPT, Claude и пр.
Jin X 06.09.2026
Скрипты Tampermonkey для CyberForum, ChatGPT, Claude и пр. Работая с форумом и нейросетями в браузере часто хочется что-то подкорректировать или добавить какого-то функционала. Ниже прикреплён. . .
Программа опроса у.з. расходомера SLS-720F
Argus19 02.09.2026
Программа опроса у. з. расходомера SLS-720F Программа опрашивает один раз в минуту три ультразвуковых расходомера SLS-720F через интерфейс RS-485 по протоколу Modbus RTU. Опрашиваются регистры. . .
Hyper-V: Компьютер должен поддерживать доверенный платформенный модуль 2.0.
Maks 31.08.2026
При установке Windows 11 на виртуальную машину Hyper-V 2-го поколения вылезла такая ошибка: Решение: в параметрах виртуальной машины, в разделе "Безопасность" (Security) активировать флаг. . .
Архитектура биовида Стива в Майнкрафте: Зачем бонобо кубический каннибализм
anaschu 30.08.2026
Кубический Вагинокапитализм в Minecraft: Математический инвариант ОДУ и рок Стивов-бонобо Главная задача разработанной «Модели Всего» — наглядно продемонстрировать наличие системной «судьбы». . .
Оттачиваю умение писать js программы.
russiannick 30.08.2026
Проектом выходного дня стало написание Книги шифров Виженера. Итогом стала версия 200, синий туман. Синий туман назван так, потому что замораживает текст под собой. Нажатие синих кнопок управляют. . .
мат медиц модель 30. презентация проекта
anaschu 27.08.2026
хоп хоп хоп хидахоп, а я кладую))
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru