Парсинг сайта

@Sensit · Регистрация: 07.05.2020

Студворк — интернет-сервис помощи студентам

Добрый день!
Я хочу найти все изменения статьи на википедии за определенный период, допустим за 2018 год. Все даты изменений указаны под классом “mw-changeslist-date”, зайти на страницу view history и отобрать 500 последний изменений и запустить такой код:

url = 'https://en.wikipedia.org/w/index.php?title=World_War_II&offset=&lim it=500&action=history'
response = requests.get(url)
soup = BeautifulSoup(response.text)
res = soup.find_all('a', attrs={'class': 'mw-changeslist-date'})
res

он, конечно, выдаст все 500 изменений.

У меня несколько вопросов:
Можно ли с главной страницы найти историю, а не вводить ссылку именно на вкладку view history. Как отобрать больше чем 500 строк если мне нужно больше данных или как отобрать конкретный период?

Спасибо!

@Garry Galler · 19.10.2020, 23:54

Сообщение от Sensit

Можно ли с главной страницы найти историю,

А какое отношение это имеет к Python? Изучай вики и ее API. А оно у нее есть. На Python есть готовая либа для вики, если что.

Новые блоги и статьи Все статьи Все блоги /
SDL3 для Web (WebAssembly): Обработчик клика мыши в браузере ПК и касания экрана в браузере на мобильном устройстве 8Observer8 02.02.2026 Содержание блога Для начала пошагово создадим рабочий пример для подготовки к экспериментам в браузере ПК и в браузере мобильного устройства. Потом напишем обработчик клика мыши и обработчик. . .	Философия технологии iceja 01.02.2026 На мой взгляд у человека в технических проектах остается роль генерального директора. Все остальное нейронки делают уже лучше человека. Они не могут нести предпринимательские риски, не могут. . .	SDL3 для Web (WebAssembly): Вывод текста со шрифтом TTF с помощью SDL3_ttf 8Observer8 01.02.2026 Содержание блога В этой пошаговой инструкции создадим с нуля веб-приложение, которое выводит текст в окне браузера. Запустим на Android на локальном сервере. Загрузим Release на бесплатный. . .	SDL3 для Web (WebAssembly): Сборка C/C++ проекта из консоли 8Observer8 30.01.2026 Содержание блога Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .
SDL3 для Web (WebAssembly): Установка Emscripten SDK (emsdk) и CMake для сборки C и C++ приложений в Wasm 8Observer8 30.01.2026 Содержание блога Для того чтобы скачать Emscripten SDK (emsdk) необходимо сначало скачать и уставить Git: Install for Windows. Следуйте стандартной процедуре установки Git через установщик. . . .	SDL3 для Android: Подключение Box2D v3, физика и отрисовка коллайдеров 8Observer8 29.01.2026 Содержание блога Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами. Версия v3 была полностью переписана на Си, в. . .	Инструменты COM: Сохранение данный из VARIANT в файл и загрузка из файла в VARIANT bedvit 28.01.2026 Сохранение базовых типов COM и массивов (одномерных или двухмерных) любой вложенности (деревья) в файл, с возможностью выбора алгоритмов сжатия и шифрования. Часть библиотеки BedvitCOM Использованы. . .	SDL3 для Android: Загрузка PNG с альфа-каналом с помощью SDL_LoadPNG (без SDL3_image) 8Observer8 28.01.2026 Содержание блога SDL3 имеет собственные средства для загрузки и отображения PNG-файлов с альфа-каналом и базовой работы с ними. В этой инструкции используется функция SDL_LoadPNG(), которая. . .

@Sensit 0 / 0 / 0 Регистрация: 07.05.2020 Сообщений: 2

	Парсинг сайта 19.10.2020, 22:11. Показов 1081. Ответов 1 Метки beautifulsoup, парсинг (Все метки) Добрый день! Я хочу найти все изменения статьи на википедии за определенный период, допустим за 2018 год. Все даты изменений указаны под классом “mw-changeslist-date”, зайти на страницу view history и отобрать 500 последний изменений и запустить такой код: url = 'https://en.wikipedia.org/w/index.php?title=World_War_II&offset=&lim it=500&action=history' response = requests.get(url) soup = BeautifulSoup(response.text) res = soup.find_all('a', attrs={'class': 'mw-changeslist-date'}) res он, конечно, выдаст все 500 изменений. У меня несколько вопросов: Можно ли с главной страницы найти историю, а не вводить ссылку именно на вкладку view history. Как отобрать больше чем 500 строк если мне нужно больше данных или как отобрать конкретный период? Спасибо! 0