Форум программистов, компьютерный форум, киберфорум
Python: Web
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 5.00/4: Рейтинг темы: голосов - 4, средняя оценка - 5.00
0 / 0 / 0
Регистрация: 01.05.2020
Сообщений: 33

Не парсит данные

01.05.2020, 18:00. Показов 769. Ответов 1

Студворк — интернет-сервис помощи студентам
помогите пожалуйста, я не могу понять почему не парсит данные в консоль, что я не так сделал?
Выводит просто пустую консоль, ошибок нет.
Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
from bs4 import BeautifulSoup
import requests
 
def parse():
    URL ='https://wgmods.net/news/'
    HEADERS = {
    "User-Agent":'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.96 YaBrowser/20.4.0.1461 Yowser/2.5 Safari/537.36'
    }
 
    response = requests.get(URL, headers = HEADERS)
    soup = BeautifulSoup(response.content,'html.parser')
    items = soup.findAll('div', class_ ='NewsContentsList_item--2Xfrj')
    comps =[]
 
    for item in items:
        comps.append({
        'title': item.find('p', class_ = 'NewsContentsList_content--1seRo').get_text(strip = True)
        })
        global comp
        for comp in comps:
            print(comps['title'])
            
parse()
0
cpp_developer
Эксперт
20123 / 5690 / 1417
Регистрация: 09.04.2010
Сообщений: 22,546
Блог
01.05.2020, 18:00
Ответы с готовыми решениями:

Бот парсит данные с сайта
помогите доделать бота Не могу никак додумать как сделать парсинг с ПТО ссылки from lib2to3.pgen2 import token import logging ...

Не парсит данные
Пытался парсить цену на товар так string url = "https://steamcommunity.com/market/search?q=" + this.textBox1.Text; using...

Не парсит аргументы
Написал на досуге небольшую программку. Что обидно, вроде всё нормально, но проблеммы с парсингом аргументов командной строки. Весь код: ...

1
Автоматизируй это!
Эксперт Python
 Аватар для Welemir1
7392 / 4819 / 1246
Регистрация: 30.03.2015
Сообщений: 13,694
Записей в блоге: 29
01.05.2020, 21:24
Jasoon, там джаваскриптом все подгружается, тебе селениум нужен, а не реквесты
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
raxper
Эксперт
30234 / 6612 / 1498
Регистрация: 28.12.2010
Сообщений: 21,154
Блог
01.05.2020, 21:24
Помогаю со студенческими работами здесь

Парсер не парсит
Пробую писать парсер на PHP, пользуюсь dom.php. Столкнулся с такой проблемой, что не могу извлечь значение. Кусочек исходного кода на...

Парсер не парсит
public void readTxt() throws IOException { String strLine; /** читаем данные из файла и выводим построчно ...

Не парсит до конца
private void button1_Click(object sender, EventArgs e) { backgroundWorker1.RunWorkerAsync(); } ...

не парсит json
Помогите найти ошибку, я нажимаю на кнопку, скрипт отправляет на сервер данные, и возвращает json, на клиенте я парсю в обьект, ну проблема...

Не парсит сайт
Всем привет, столкнулась с проблемой не возможности пропарсить сайт, http://anoik.is/wormholes/H121, пробовала запросом get хотя бы...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
2
Ответ Создать тему
Новые блоги и статьи
Автозаполнение реквизита при выборе элемента справочника
Maks 27.03.2026
Программный код из решения ниже на примере нетипового документа "ЗаявкаНаРемонтСпецтехники" разработанного в конфигурации КА2. При выборе "Спецтехники" (Тип Справочник. Спецтехника), заполняется. . .
Сумматор с применением элементов трёх состояний.
Hrethgir 26.03.2026
Тут. https:/ / fips. ru/ EGD/ ab3c85c8-836d-4866-871b-c2f0c5d77fbc Первый документ красиво выглядит, но без схемы. Это конечно не даёт никаких плюсов автору, но тем не менее. . . всё может быть. . .
Автозаполнение реквизитов при создании документа
Maks 26.03.2026
Программный код из решения ниже размещается в модуле объекта документа, в процедуре "ПриСозданииНаСервере". Алгоритм проверки заполнения реализован для исключения перезаписи значения реквизита,. . .
Команды формы и диалоговое окно
Maks 26.03.2026
1. Команда формы "ЗаполнитьЗапчасти". Программный код из решения ниже на примере нетипового документа "ЗаявкаНаРемонтСпецтехники" разработанного в конфигурации КА2. В качестве источника данных. . .
Кому нужен AOT?
DevAlt 26.03.2026
Решил сделать простой ланчер Написал заготовку: dotnet new console --aot -o UrlHandler var items = args. Split(":"); var tag = items; var id = items; var executable = args;. . .
Отправка уведомления на почту при изменении наименования справочника
Maks 24.03.2026
Программная отправка письма электронной почты на примере изменения наименования типового справочника "Склады" в конфигурации БП3. Перед реализацией необходимо выполнить настройку системной учетной. . .
модель ЗдравоСохранения 5. Меньше увольнений- больше дохода!
anaschu 24.03.2026
Теперь система здравосохранения уменьшает количество увольнений. 9TO2GP2bpX4 a42b81fb172ffc12ca589c7898261ccb/ https:/ / rutube. ru/ video/ a42b81fb172ffc12ca589c7898261ccb/ Слева синяя линия -. . .
Midnight Chicago Blues
kumehtar 24.03.2026
Такой Midnight Chicago Blues, знаешь?. . Когда вечерние улицы становятся ночными, а ты не можешь уснуть. Ты идёшь в любимый старый бар, и бармен наливает тебе виски. Ты смотришь на пролетающие. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru