Парсинг сайта

@Sensit · Регистрация: 07.05.2020

Студворк — интернет-сервис помощи студентам

Добрый день!
Я хочу найти все изменения статьи на википедии за определенный период, допустим за 2018 год. Все даты изменений указаны под классом “mw-changeslist-date”, зайти на страницу view history и отобрать 500 последний изменений и запустить такой код:

url = 'https://en.wikipedia.org/w/index.php?title=World_War_II&offset=&lim it=500&action=history'
response = requests.get(url)
soup = BeautifulSoup(response.text)
res = soup.find_all('a', attrs={'class': 'mw-changeslist-date'})
res

он, конечно, выдаст все 500 изменений.

У меня несколько вопросов:
Можно ли с главной страницы найти историю, а не вводить ссылку именно на вкладку view history. Как отобрать больше чем 500 строк если мне нужно больше данных или как отобрать конкретный период?

Спасибо!

@Garry Galler · 19.10.2020, 23:54

Сообщение от Sensit

Можно ли с главной страницы найти историю,

А какое отношение это имеет к Python? Изучай вики и ее API. А оно у нее есть. На Python есть готовая либа для вики, если что.

Новые блоги и статьи Все статьи Все блоги /
Очистка реквизитов документа при копировании Maks 09.04.2026 Алгоритм из решения ниже применим как для типовых, так и для нетиповых документов на самых различных конфигурациях. Задача: при копировании документа очищать определенные реквизиты и табличную. . .	модель ЗдравоСохранения 8. Подготовка к разному выполнению заданий anaschu 08.04.2026 https:/ / github. com/ shumilovas/ med2. git main ветка * содержимое блока дэлэй из старой модели теперь внутри зайца новой модели 8ATzM_2aurI	Блокировка документа от изменений, если он открыт у другого пользователя Maks 08.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа, разработанного в конфигурации КА2. Задача: запретить редактирование документа, если он открыт у другого пользователя. / / . . .	Система безопасности+живучести для сервера-слоя интернета (сети). Двойная привязка. Hrethgir 08.04.2026 Далее были размышления о системе безопасности. Сообщения с наклонным текстом - мои. А как нам будет можно проверить, что ссылка наша, а не подделана хулиганами, которая выбросит на другую ветку и. . .
Модель ЗдрввоСохранения 7: больше работников, больше ресурсов. anaschu 08.04.2026 работников и заданий может быть сколько угодно, но настроено всё так, что используется пока что только 20% kYBz3eJf3jQ	Дальние перспективы сервера - слоя сети с космологическим дизайном интефейса карты и логики. Hrethgir 07.04.2026 Дальнейшее ближайшее планирование вывело к размышлениям над дальними перспективами. И вот тут может быть даже будут нужны оценки специалистов, так как в дальних перспективах всё может очень сильно. . .	Горе от ума kumehtar 07.04.2026 Эта мне ментальная установка, что вот прямо сейчас, мол, мне для полного счастья не хватает (нужное вписать), и когда я этого достигну - тогда и полный кайф. Одна из самых сильных ловушек на пути. . . .	Использование значений реквизитов справочника в документе, с определенными условиями и правами Maks 07.04.2026 1. Контроль срока действия договора Алгоритм из решения ниже реализован на примере нетипового документа "ЗаявкаНаРаботу", разработанного в конфигурации КА2. Задача: уведомлять пользователя, если. . .

@Sensit 0 / 0 / 0 Регистрация: 07.05.2020 Сообщений: 2

	Парсинг сайта 19.10.2020, 22:11. Показов 1104. Ответов 1 Метки beautifulsoup, парсинг (Все метки) Добрый день! Я хочу найти все изменения статьи на википедии за определенный период, допустим за 2018 год. Все даты изменений указаны под классом “mw-changeslist-date”, зайти на страницу view history и отобрать 500 последний изменений и запустить такой код: url = 'https://en.wikipedia.org/w/index.php?title=World_War_II&offset=&lim it=500&action=history' response = requests.get(url) soup = BeautifulSoup(response.text) res = soup.find_all('a', attrs={'class': 'mw-changeslist-date'}) res он, конечно, выдаст все 500 изменений. У меня несколько вопросов: Можно ли с главной страницы найти историю, а не вводить ссылку именно на вкладку view history. Как отобрать больше чем 500 строк если мне нужно больше данных или как отобрать конкретный период? Спасибо! 0