Парсинг данных с таблицы сайта. Selenium

23.03.2020, 02:08. Показов 4557. Ответов 0

Метки python, selenium, парсинг (Все метки)

Студворк — интернет-сервис помощи студентам

Только начинаю знакомиться с программированием, в качестве первой задачи необходимо спарсить с сайта https://www.rotowire.com/soccer/player.php?id=1279 данные таблицы "Soccer Per Game Stats". По умолчанию открывается вкладка "Session Stats", поэтому необходимо сначала кликнуть по вкладке "Per Game" и потом выгрузить содержимое ячеек таблицы. Данные содержатся в контейнерах div, как и вся таблица.
На данный момент получилось так:

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
def main():
    driver = webdriver.Chrome()
    driver.get("https://www.rotowire.com/soccer/player.php?id=1279")
    elements = driver.find_elements_by_css_selector("div.filter-tab")
    elements[2].click()
 
def stats(container):
    soup = BeautifulSoup(container, "html.parser")
    matches = soup.select(".socStatsPerGame")
    for match in matches:
        year = match.select_one("div, attrs={'aria-colindex': '1'}")
        league = match.select_one("div, attrs={'aria-colindex': '2'}")
        print(year.text, league.text)
        stats(container)
 
    driver.quit()
 
if __name__ == "__main__":
    main()

Запускается браузер, открывается нужная ссылка, нажимается вкладка "Per Game", закрывается браузер, но данные не выгружаются, в консоле:

/Parser.py

Process finished with exit code 0

Windows 10, Python 3.7.7, PyCharm. Просьба помочь разобраться.

IT_Exp

Эксперт

34794 / 4073 / 2104

Регистрация: 17.06.2006

Сообщений: 32,602

Блог

23.03.2020, 02:08

Ответы с готовыми решениями:

Парсинг таблицы с сайта
Добрый день. Для парсинга использую библиотеку xNet Но наткнулся на сайтик.. там используется вот такая вот чудовщина: ...

Парсинг таблицы на странице сайта
Нужно спарсить данные html-таблицы (названия и данные в ячейках таблицы).

Парсинг данных с сайта или страницы сайта
Здравствуйте, добрые люди! Есть задача спарсить данные с страницы соц сети. Или просто со страницы с помощью js. На пхп не предлагать....

Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.

BasicMan

Эксперт

29316 / 5623 / 2384

Регистрация: 17.02.2009

Сообщений: 30,364

Блог

23.03.2020, 02:08

Помогаю со студенческими работами здесь

HtmlAgilityPack, парсинг таблицы с сайта в DataGridview
Пытаюсь спарсить таблицу с сайта https://autoreview.ru/arcap/ncap foreach (var table in...

парсинг простейшей html таблицы с сайта
Привет всем! Натолкнулся на проблему с простейшим парсингом таблицы с сайта. Табличку и простейшую страничку создал на localhost, при...

Парсинг таблицы с сайта в Unity3D для наложения на триггер
Здравствуйте, требуется спарсить таблицу с сайта (1 фотография) в unity, чтобы эта таблица стала объектом который можно будет наложить на...

[Py2.7] Парсинг сайта с экспортом конкретной таблицы в Excel-файл
Здравствуйте. В университете мне дали 2 задания по парсингу: сайта и документа Word. Про парсинг сайта на Python я смотрела видео на...

Парсинг данных с сайта
Добрый вечер, есть проблема : Мне надо парсить количество поставленных денег на каждую из команд на на данном сайте (del). Дело в...

Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:

Новые блоги и статьи Все статьи Все блоги /
Оттенки серого Argus19 18.03.2026 Оттенки серого Нашёл в интернете 3 прекрасных модуля: Модуль класса открытия диалога открытия/ сохранения файла на Win32 API; Модуль класса быстрого перекодирования цветного изображения в оттенки. . .	SDL3 для Desktop (MinGW): Рисуем цветные прямоугольники с помощью рисовальщика SDL3 на Си и C++ 8Observer8 17.03.2026 Содержание блога Финальные проекты на Си и на C++: finish-rectangles-sdl3-c. zip finish-rectangles-sdl3-cpp. zip	Символические и жёсткие ссылки в Linux. algri14 15.03.2026 Существует два типа ссылок — символические и жёсткие. Ссылка в Linux — это запись в каталоге, которая может указывать либо на inode «файла-ИСТОЧНИКА», тогда это будет «жёсткая ссылка» (hard link),. . .	[Owen Logic] Поддержание уровня воды в резервуаре количеством включённых насосов: моделирование и выбор регулятора ФедосеевПавел 14.03.2026 Поддержание уровня воды в резервуаре количеством включённых насосов: моделирование и выбор регулятора ВВЕДЕНИЕ Выполняя задание на управление насосной группой заполнения резервуара,. . .
делаю науч статью по влиянию грибов на сукцессию anaschu 13.03.2026 прикрепляю статью	SDL3 для Desktop (MinGW): Создаём пустое окно с нуля для 2D-графики на SDL3, Си и C++ 8Observer8 10.03.2026 Содержание блога Финальные проекты на Си и на C++: hello-sdl3-c. zip hello-sdl3-cpp. zip Результат:	Установка CMake и MinGW 13.1 для сборки С и C++ приложений из консоли и из Qt Creator в EXE 8Observer8 10.03.2026 Содержание блога MinGW - это коллекция инструментов для сборки приложений в EXE. CMake - это система сборки приложений. Здесь описаны базовые шаги для старта программирования с помощью CMake и. . .	Как дизайн сайта влияет на конверсию: 7 решений, которые реально повышают заявки Neotwalker 08.03.2026 Многие до сих пор воспринимают дизайн сайта как “красивую оболочку”. На практике всё иначе: дизайн напрямую влияет на то, оставит человек заявку или уйдёт через несколько секунд. Даже если у вас. . .

Наверх