Как сделать бота, кликающего по элементам на сайте с ajax?

25.11.2013, 17:12. **Показов** 25613. **Ответов** 3

Студворк — интернет-сервис помощи студентам

Здравствуйте. Подскажите как можно с помощью питона открыть ссылку и поочередно тыкать по конкретным html элементам (при клики по ним выполняется ajax запрос) и при этом чтобы я мог работать за пк то есть браузер будет свернут ну действия на страницы должны происходить.
P.S. Если кто знает пните в нужную сторону а то целый день гугл копаю и не чего не надыбал. Заранее спасибо!

@alex925 · 25.11.2013, 18:36

Тебе нужна библиотека selenium

вот тут есть пример

Чем автоматизировать заполнение форм в браузере (создание ботов)

Автор: Igor Kirsanov

Для автоматизированного тестирования, как и для написания ботов кликающих по ссылкам, заполняющих формы и имитирующих действия пользователя используются одни и теже программы. Программистам готовые решения не будут интересны, а вот компоненты позволяющие сделать подобное скорее всего заинтересуют. Рассмотрим бесплатные решения.

1) Селениум
Selenium, это не химический элемент селен, это инструмент для тестирования сайтов. Предназначен он в первую очередь для тестирования, т.е. можно сделать программу и смотреть как запускаются браузер, в нем робот ходит по страничкам, кликает по ссылкам, загружает файлы и т.п.

Лично мне нравится модуль под язык программирования питон, хотя доступно и для других языков, а также автономная IDE для браузера firefox.
Установка для питона достаточно простая
С сайта seleniumhq.org загружаем Selenium Client Drivers для python, распаковываем и устанавливаем как обычно, для виндовс через файл setup.py -install
Пример программы на python

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
#!/usr/bin/env python 
# -*- coding: utf-8 -*-
from selenium import webdriver
from selenium.common.exceptions import NoSuchElementException
from selenium.webdriver.common.keys import Keys
import time
 
browser = webdriver.Firefox() # Get local session of firefox
browser.get("http://www.yandex.ru") # Load page
assert "Яндекс".decode("utf-8") in browser.title
elem = browser.find_element_by_name("text") # Find the query box
elem.send_keys("http://www.site.com/".decode("utf-8") + Keys.RETURN)
time.sleep(0.2) # Let the page load, will be added to the API

В данном примере запускается браузер Mozilla Firefox, скрипт переходит на страницу поиска яндекса. В строке поиска набирает название этого сайта www.site.com и нажимает кнопку поиска.

Для тех кому нужна простая автоматизация, например просто выполнение типовых действий, лучше использовать дополение к браузеру firefox под названием Selenium IDE

@Wolkodav · 25.11.2013, 19:23

Kirill_m, можно прямо запросы нужные слать - это requests, а не по браузеру тыкать)

@alex925 · 25.11.2013, 20:25

Wolkodav, это не во всех задачах подходит. Я вот писал бота недавно, сначала по глупости тоже решил просто слать запросы через requests. Но после изучения сайта я понял, что он весь построен на ajax и введёные значения обрабатываются сначала js и только потом отсылаются на сервер. То есть, чтобы элементарно авторизоваться и перекопал пол сайта.

Сейчас детально описывать свои мытарства не буду, просто мораль всего этого рассказа, что когда сайт напичкан js и страница обновляется через ajax, requerst не поможет.

Новые блоги и статьи Все статьи Все блоги /
Валидация и контроль данных табличной части документа перед записью Maks 22.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа, разработанного в КА2. Задача: контроль и валидация данных табличной части документа перед записью с учетом регламента компании. . .	Отчёт о затраченных материалах за определенный период с макетом печатной формы Maks 21.04.2026 Отчёт из решения ниже размещён в конфигурации КА2. Задача: разработка отчёта по затраченным материалам за определённый период, с возможностью вывода печатной формы отчёта с шапкой и подвалом. В. . .	Отчёт о спецтехнике находящейся в ремонте Maks 20.04.2026 Отчёт из решения ниже размещен в конфигурации КА2. Задача: отобразить спецтехнику, которая на данный момент находится в ремонте. Есть нетиповой документ "Заявка на ремонт спецтехники" который. . .	Памятка для бота и "визитка" для читателей "Semantic Universe Layer (Слой семантической вселенной)" Hrethgir 19.04.2026 Сгенерировано для краткого описания по случаю сборки и компиляции скелета серверного приложения. И пусть после этого скажут, что статьи сгенерированные AI - туфта и не интересно. И это не реклама -. . .
Запрет удаления строк ТЧ документа при определённом условии Maks 19.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа "Аккумуляторы", разработанного в конфигурации КА2. У данного документа есть ТЧ, в которой в зависимости от прав доступа. . .	Модель заражения группы наркоманов alhaos 17.04.2026 Условия задачи сформулированы тут Суть: - Группа наркоманов из 10 человек. - Только один инфицирован ВИЧ. - Колются одной иглой. - Колются раз в день. - Колются последовательно через. . .	Мысли в слух. Про "навсегда". kumehtar 16.04.2026 Подумалось тут, что наверное очень глупо использовать во всяких своих установках понятие "навсегда". Это очень сильное понятие, и я только начинаю понимать край его смысла, не смотря на то что давно. . .	My Business CRM MaGz GoLd 16.04.2026 Всем привет, недавно возникла потребность создать CRM, для личных нужд. Собственно программа предоставляет из себя базу данных клиентов, в которой можно фиксировать звонки, стадии сделки, а также. . .

Kirill_m

	Как сделать бота, кликающего по элементам на сайте с ajax? 25.11.2013, 17:12. Показов 25613. Ответов 3 Метки нет (Все метки) Здравствуйте. Подскажите как можно с помощью питона открыть ссылку и поочередно тыкать по конкретным html элементам (при клики по ним выполняется ajax запрос) и при этом чтобы я мог работать за пк то есть браузер будет свернут ну действия на страницы должны происходить. P.S. Если кто знает пните в нужную сторону а то целый день гугл копаю и не чего не надыбал. Заранее спасибо!

@Wolkodav 842 / 480 / 58 Регистрация: 18.09.2012 Сообщений: 1,688
	25.11.2013, 19:23
	Kirill_m, можно прямо запросы нужные слать - это requests, а не по браузеру тыкать) 0

@alex925 2742 / 2341 / 620 Регистрация: 19.03.2012 Сообщений: 8,830
	25.11.2013, 20:25
	Wolkodav, это не во всех задачах подходит. Я вот писал бота недавно, сначала по глупости тоже решил просто слать запросы через requests. Но после изучения сайта я понял, что он весь построен на ajax и введёные значения обрабатываются сначала js и только потом отсылаются на сервер. То есть, чтобы элементарно авторизоваться и перекопал пол сайта. Сейчас детально описывать свои мытарства не буду, просто мораль всего этого рассказа, что когда сайт напичкан js и страница обновляется через ajax, requerst не поможет. 0

Опции темы