Форум программистов и сисадминов Киберфорум

Темы раздела Python: Web

Парсинг динамической страницы
Доброго времени суток, уважаемые форумчане! Я новичок в программировании. Помогите правильно написать код. Не получается вынуть имя Ирина З из <div class="outcomes-desktop-player flex w-100 flex-grow...

Как парсить сайт-веб сервер, созданный Open Harware Monitor
Кто не знает, есть такая маленькая программка - OpenHarwareMonitor. Она мониторит загруженность вашего пк(загрузка, частота процессора, температура и еще куча всего). Вы можете, для ознакомления...

Отобразить/напечатать номер строки tr таблицы
Добрый день Есть запрос который находит сроку в таблице на сайте, все работает for row in rows: columns = row.find_elements(By.TAG_NAME, "tr") Подскажите как отобразить номер этой строки?...

Не работает Replace
Такая ситуация. В DataFrame загружаю данные из таблицы Excel. Там данные такого вида: RN7654. Нужно оставить только число, без RN. Пишу код: data_artikul = pd.read_excel('C:\\output.xlsx',...

Установил модуль beautifulsoup но vs code не хочет его видеть, виртуальное окружение
Хотел попробовать что-нибудь спарсить никогда этого не делал и вот сел сегодня, но вообще не могу разобраться с этим виртуальным окружением, вроде установил все, и beautifulsoup и lxml но visual...

Как ввести текст в поле в Selenium
Добрый день. Есть такой отрывок html: <div class="search-content"> <input type="text" placeholder="Поиск среди 20 000 радиодеталей, электротоваров и электронных компонентов"...

Не могу на Питоне создать функцию
Пж выручайте Братья! Не могу на Питоне создать функцию! eel = { _host: window.location.origin, set_host: function (hostname) { eel._host = hostname }, expose:...

Надо решить задачу по сортировке слов
Есть сайт где надо ввести слово и тогда показывает есть слово в базе или нет и какой уровень сложности. Базу слов у них не допроситься, найти в их коде также не получилось. Решил сделать программу...

Парсинг страницы
Добрый день. Подскажите, как спарсить такой код? <div>ОПТ<span class="info_rrc_no_hover"></span>, ₽: <span style="font-size: 18px; color:#ff6600;"> 181.2 ...

Как извлекать текст с вебстраницы (BeautifulSoup)?
Анализирую файл html, который имеет однотипные блоки кода. Извлекаю текст из них кодом: title = link_tag.img if link_tag.img and 'alt' in link_tag.img.attrs else "Без названия" А как извлекать не...

Парсер для сайта Gamebanana
Поставил для себя задачу написать парсер карт CS 1.6 для сайта Gamebanana Ссылка на раздел: https://gamebanana.com/mods/cats/5474?_sSort=Generic_MostLiked Необходимо загрузить на жесткий диск...

Реализация get запроса через прокси
Добрый день, я пытаюсь реализовать передачу запросов через прокси сервер. import requests prox = "14.175.185.229:1080" proxies = { 'http': 'http://' + prox } url = 'https://ifconfig.me'...

Цикл для парсинга всей таблицы
Добрый день! Написал запрос для парсинга таблицы с сайта (в дальнейшем планирую записывать в БД SQL), на данный момент выводит первую строку таблицы. Читаю документацию, но не могу понять как...

Как парсить с vksport?
Примеры ссылок на видео: https://vksport.vkvideo.ru/video-98909831_456240366 https://vksport.vkvideo.ru/video-35508801_456242749

Календарь на весь год в виде страницы http
Доброго времени. подскажите, как реализовать одну задачу. имею календарь формата html реализованный на python 2.7 (знаю что старая версия, но нельзя выше.) #!/usr/bin/env python # -*-...

Как найти div, в котором есть определенный текст?
Надо найти div c этим классом в коде файла HTML, с содержимым в этом div, в котором встречается слово игра или игре <div class="vkitVideoCardLayout__card--i7sFT...

Selenium WebDriver (Chrome) работает только один раз – последующие запуски завершаются ошибкой
Я использую Selenium WebDriver, использую linux mint. При первом запуске всё работает нормально, но при попытке повторного запуска сайт не открывается. def check(driver): url =...

Проблема с отправкой тестовых запросов
Здравствуйте, товарищи, столкнулся с такой проблемой, написал простейшую прогу по отправке GET запроса на сервак Google и вывода ответа, запустил у себя на компе и ответа никакого не получил, прога...

Парсинг div
Не получается спарсить текст из div-а: Вот кусок html откуда нужно достать 82,38: <div class="text-5xl/9 font-bold text- md:text- md:leading-" data-test="instrument-price-last">82,38</div>...

Парсинг сайта
Столкнулся с проблемой, что при повторном гет запросе через некоторе время, на веб-страницу, х-access token меняется Нужно его захватывать при каждом успешном входе в личный кабинет на сайте,...

Всплывающая дополнительная информация
Не знаю как по проще объяснить, но я попробую. Допустим есть два одинаковый квадрата, один из них должен находиться на странице постоянно, а второй должен появляться при наведении курсором на первый...

Имя папки плейлиста
Хочу спарсить плейлист https://vkvideo.ru/playlist/-30565462_38, у которого название РКТ в папку с таким же именем (имя должно браться из интернета и подставляться в имя папки, так как скачиваемых...

Ошибка "Enable JavaScript to continue using this application" при парсинге сайта с помощью requests_html
Пытаюсь парсить сайт РЖД при помощи requests_html, потому что он генерируется через JS, Но все равно выдается ошибка. У других людей вроде получается парсить JS с помощью этой библиотеки, почему у...

Не могу разобраться с wget (wget2)
Хочу составить команду, которая скачает начальный сайт целиком и внешние страницы, на которые ведут ссылки из первоначального сайта только (но с картинками, CSS, JS файлами), без перехода с них...

Проблема с Selenium Webdriver Manager (
Где-то с месяц назад в рамках лабораторной работы занимался парсингом сайтов с помощью Selenium. Пользовался Chrome WebDriver через Google Colab, всё было хорошо. Сегодня решил вернуться к этому, но...

Какие прокси подходят для парсинга?
Бывают Socks 4 и Socks 5, IPV6. Любые можно брать?

Проверка чека
Напишите программу, которая проверяет чек из магазина. На чеке указано, по каким ценам и в каком количестве куплены товары, общая стоимость данного товара (т. е. данной позиции в чеке), а также...

Найти в данной строке второе вхождение буквы "f", и вывести индекс этого вхождения
Задача 3 Дана строка. Найдите в этой строке второе вхождение буквы f, и выведите индекс этого вхождения. Если буква f в данной строке встречается только один раз, выведите число -1, а если не...

Получение данных о погоде с сайта Яндекс
У меня есть скрипт, который должен получать информацию о погоде с сайта Яндекс погода. Но скрипт почему то получается информации только за 1 день. Проблема в том, что class в коде яндекс погоды...

Скачивание видео по ссылке с AnimeGO
Мне дают ссылку на аниме с сайта AnimeG0, моя программа должна вернуть список озвучек, которые есть для этого аниме на этом сайте с плеера kodik, так же ссылку на видео формата .m3u8, я просто вообще...

Ошибка UnicodeDecodeError: 'utf-8' codec can't decode byte 0xcc in position 0: invalid continuation byte
Я написал код и у меня вылетела ошибка UnicodeDecodeError: 'utf-8' codec can't decode byte 0xcc in position 0: invalid continuation byte я не знаю как это исправить вот исходный код: from...

Virtualenv (sourse не является внутренней или внешней командой)
После создания виртуального окружения я его запускаю ОС Windows sourse env/Scripts/activate Искал проблему в интернете и пробовал такие способы: env/Scripts/activate env/Scripts/activate.but...

Как написать парсер Яндекс-карт?
Как вообще возможно написать парсер яндекс.карт на python? или может другие языки нужно использовать?

Поиск текста на странице с Selenium
Привет камрады. Решил засесть за web с питоном, появился вопросик. Работаю с Selenium, разобрался как вводить логопасы и тд, но вот как найти нужный текст на страничке всё никак не могу...

Не работает модуль Requests
Добрый день. Установил модуль Requests. Везде пишут о том как легко с ним работать. Я начал по примерам в интернете писать простейшие инструкции. Пишу вот так: import requests response =...

Vk_api - прикрепление фотографии и отправка сообщения
Здравствуйте! Прошу помощи с vk_api: ссылка на github Не могу понять каким образом отправить фото в сообщение. Знаю, что нужно для этого загрузить фото на сайт, получить какие-то его параметры и...

Python не является внутренней или внешней
Господа объясните дурачку что делать,если “”python“ не является внутренней или внешней командой, исполняемой программой или пакетным файлом.” Да-да, я знаю, что путь должен быть прописан в Path....

Парсер прокси
Здравствуйте, помогите пожалуйста с парсером. Нужно с сайта http://spys.one/free-proxy-list/RU/ спарсить proxy сервера получается только 30, на сайте в таблице есть фильтры, можно отобразить 500...

Как обойти капчу при написании парсера на Selenium?
В общем пишу парсер на селениуме. При попытке открыть сайт вылезает капча. Причём сначала нужно указать, что ты не робот (постава галочки), а потом выбрать соотоветствующие картинки. Я знаю, что...

Ошибка: selenium.common.exceptions.MoveTargetOutOfBoundsException: Message: move target out of bounds
Доброго дня. код: browser = Chrome(executable_path='chromedriver') URL = 'site_name bla bla bla' browser.get(URL) # last_height = browser.execute_script("return document.body.scrollHeight")...

Найти планету, орбита которой имеет самую большую площадь
Планеты вращаются вокруг звезд по эллиптическим орбитам. Назовём самой далёкой планетой ту, орбита которой имеет самую большую площадь. Напишите функцию findFarthestOrbit(listOfOrbits), которая...

Не работает selenium
Пытаюсь запустить программу, написанную при помощи selenium и выдает такое: Traceback (most recent call last): File...

Выкачивание картинок с сайта в папку на Python 3.5
Kак можно выкачать все картинки с сайта и сохранить их в папку на Python 3.5? а то мучаюсь никак не могу найти:)

Парсинг новостной группы в Vk
беда какая-то с картинками, дело в том что картинок несколько бывает к новости прикрепляют, также и ауди бывает(не плоъо было бы и аудио это получать, но все по-тихоньку)как-то не сложилось у меня с...

GET запрос с ошибкой 403
Делаю запрос. Статус запроса 403. Через браузер запрос выполнить получается. Везде пишут, что в такой ситуации надо указать User-Agent. Я указал, но никакого результата. Пробовал добавлять различные...

Как с использованием post запрос нажать на кнопку на сайте в python?
Мне надо нажать на кнопку на сайте. Я разобрался как это сделать с помощью selenium webdriver, но понял что мне это не подходит, слишком медленно работает. Узнал что можно это сделать с помощью...

Как реализовать модель для регистрации/авторизации пользователей?
Всем привет. Собственно, меня уже направили на верный путь, как лучше это делать, используя встроенный функционал Django. Но у меня все же остался вопрос, почему мой код не работает. Немного...

Selenium - выбор элемента из выпадающего списка
Здравствуйте! С помощью selenium пытаюсь на сайте выбрать элемент из выпадающего списка (см. id="DepartureLocations"). Получаю ошибку: element not interactable: Element is not currently...

Подпись PDF
Проект на jango. Заказ справки. Клиент нажимает на кнопку и генерируется из шаблона pdf файл. осталось понять как его подписывать эцп. Сгенерировал самоподписанный сертификат, какие действия дальше?...

Авторизация через прокси сервер VK
На Украине заблокирован VK, поэтому я использую прокси, но когда я использую прокси я не могу авторизироваться в Vk. Пишет не тот ip. {'error': {'error_code': 5, 'error_msg': 'User authorization...

Парсинг сайта с javascript
Я в этом деле новичок, возникла такая потребность. С сайта https://1xstavka.ru/results/, нужно вытащить таблицы (раздел "баскетбол") в .csv файл, отдельно по каждой дате или задавать промежутком. Я...

NOT NULL constraint failed откуда ошибка?
Всем привет! class Profile(AbstractUser): #user = models.OneToOneField(User, on_delete=models.CASCADE) Family = models.CharField(max_length=200) City =...

String indices must be integers
Всем привет,вообщем написал парсер , и долго боролся с картинкой(не мог подтянуть), только поборол эту проблему , как выскочила другая. теперь не могу записать данные в ексель из-за string indices...

Проблема при использовании библиотеки requests
Всем привет! Только начал изучать Python и тут же столкнулся с проблемой. import requests response = requests.get('https://yandex.ru/', verify=False) print(response.text) import requests...

Как определять, сколько максимально потоков можно запускать?
Здравствуйте. Есть класс. Он накапливает в себе задания на отправку запросов, а потом разом, многопоточно их отправляет. Как определять, сколько максимально потоков можно запускать? На домашнем...

Selenium браузер закрывается после открытия
Добрый день, решил ознакомиться с Selenium. Установил последнюю версию через pip, скачал chromedriver последней версии, указал путь к нему, установил хром последней версии. Пытаюсь банально...

KML файлы
работаю на Python с kml файлом, но мне нужно чтобы результат работы (только для просмотра) отображался в google maps или хотя бы в google earth но в браузере. делала как написано везде: выложить файл...

Парсер OLX, идеи реализации
Народ, подскажите пожалуйста подход к парсингу olx и похожих сайтов. Сайт все запросы отвергает, может кто-то знает , поделитесь).

как установить BeautifylSoup
Добрый день! Не могу установить BeautifulSoup. Может кто сталкивался с такой проблемой? Установщик нормально отработал. Сам Python нормально работает. Пути в Path прописаны. Компьютер перезагружала....

Как получить все ссылки с сайта?
Есть задача - получить все ссылки со всех страниц сайта но у меня почему-то не получается это сделать он выводит какие-то ссылки, но... как-то не правильно. Ссылок около 800 должно быть, а...

Парсинг поисковой выдачи // цикл
Привет, форумчане! Помогите разобраться... Пишу парсер для Яндекс.поиска. Должен собирать с нескольких страниц (в примере с двух) только рекламные объявления и записывать их в csv. Записывает...

Selenium размер окна при запуске firefox
Не могу разобраться как задать размер окна перед запуском браузера. Второй день маюсь.

SSLError
Здравствуйте, уважаемые форумчане. Есть у меня пара парсеров сайтов для скачивания картинок. До сегодняшнего дня всё работало отлично. Сегодня мне пришлось переустановить Питон (python-3.8.6) и,...

Ошибка "CSRF token missing or incorrect" при передаче информации в форме
Вообщем создал я модели(не суть важно какие). Через админку добавил группу пользователей и соответственно права(разрешения) изменять(создавать новые, удалять) объекты моделей. А потом и пользователя...

Анализ информации из социальных сетей
нужно собирать и анализировать информацию из социальных сетей на python делать? с чего нужно начинать?

Requests.exceptions.ConnectionError: ('Connection aborted.', RemoteDisconnected
Короче, мне надо получить html вот этой страницы например https://dictionary.cambridge.org/dictionary/english/hi Но urllib.request.urlopen(url) здесь не работает. Ошибка...

Сбивается сортировка при переходе на другую страницу
Реализовал сортировку и пагинацию (на Джанго 1.11). Всё работает, но как только переходишь на другую страницу - сортировка сбивается. Я понимаю, что сбивается url, но не знаю, как это исправить....

Скачать страницу сайта в Python так же, как это делает браузер
Суть задачи в общем как раз отражает заголовок. Детали: аргументами на вход подаём 1) url 2) системный путь (C:\Python34\site) Результатом работы функции является html страница и папка с...

Обработка нажатие кнопки
<!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8"> <title>demo</title> </head> <body> <input type="text" id="name"></p>

Python в HTML файлах
Можно ли в html файлы вставлять код Python, наподобие как в PHP можно вставлять с помощью include, require? Если нельзя, то может быть есть какие то обходные пути?

При выводе русского текста выдаёт "Non-ASCII character"
Привет всем! Написал в модели: from django.db import models class Post(models.Model): title = models.CharField(max_length=255) datetime = models.DateTimeField(u"Дата публикации") content =...

Telegram+Telebot = Read timeout error?
Доброго времени суток. Держу небольшого бота на выделенной машине. Переодически вылетает подобная ошибка: Traceback (most recent call last): File...

Заполнить форму авторизации и залогиниться на сайт (BeautifulSoap)
Доброго времени суток. Необходимо авторизироваться на сайте, строку с логином и паролем в тегах сайта нашел (использовал BeautifulSoup) и добавил туда логин и пароль. Если ввести на странице...

Как указать относительный путь?
Не получается указать относительный путь. У меня есть такие вот ключи в settings.py STATICFILES_DIRS = TEMPLATES = , 'APP_DIRS': True, 'OPTIONS': { ...

Как убрать экранирующие слеши перед кавычками при отдаче клиенту JSON?
Добрый вечер, Ниже в примере я использую библиотеку hug реализующую rest стандарт, я пробую вернуть json клиенту, но постоянно неудачно, ниже привел две попытки. Запуск http сервера: hug -f...

Посчитать количество тегов на странице сайта
Как можно быстро и удобно посчитать количество тегов на странице сайта(как всех вообще, так и каждый вид тега по отдельности)? А вообще нужно найти частоту их появы на сайте. При чем у меня почему-то...

Запуск скриптов Python 3 на сервере Apache 2
Имею: python3 + Apache2 + Ubuntu 1) Создаю папку хоста и файл со скриптом: /var/www/mysite.ru/index.py 2) Создаю файл-конфиг: /etc/apache2/sites-available/mysite.ru.conf содержимое...

Парсинг защищенного сайта, доступ к cookies
Здравствуйте, уважаемые форумчане. Итак. У меня стоит задача парсить страницы с вот таким адресом, но разными id: http://www.immoweb.be/en/myselect.estate.cfm?idbien=5146812. Точнее, с парсингом-то...

Зайти в сессию с requests и продолжить парсинг уже с Selenium
Добрый день, совсем запуталась с решением задачи: необходимо скачать картинки с нескольких страниц в одном разделе сайта (validate). На просторах интернета я нашла решение для скачивания и...

Как из php скрипта передать значение в python и получить результат в этот же php скрипт
Нам с товарищем в универе задали выполнить работу, а именно написать матричный калькулятор, я создал frontend https://webinclude.site/ (похвастаюсь), а он занялся back-end, со мной всё понятно, но...

Как узнать имя исключения в Python , для объекта webdriver, для секции try/except
Всем здравствовать и болеть ))) Ребят --1-- как узнать конкретное имя исключения для объекта? --2-- как пустить трафик от прокси №1 через прокси №2 в моем случае от проксик №1 -...

Как передать данные html формы в приложение на python
Добрый вечер. Есть приложение написанное на python. Приложение прослушивает сокет принимает запрос и отправляет ответ. С выдачей главной страницы сайта проблем нет. Как передать данные формы...

Извлечь текст из тегов
Добрый вечер! Из сайта извлекаю информацию вот такого вида: <span>CDEC Youth</span><span class="flag CN" title="China"></span> </span>, <span class="opp opp1"> и <span class="opp opp2"> <span...

Python3 рассылка почты
Есть много писем, надо их постоянно отправлять import smtplib from email.mime.text import MIMEText from email.header import Header # Настройки mail_sender = 'my_mail@bk.ru' mail_receiver...

Получение вебхука от стороннего сервиса в скрипте Python
Доброго времени суток уважаемые форумчане. Я новичок в программировании и передо мной встала задача словить вэбхук от crm системы у себя на хостинге в скрипте , затем сохранить результаты в формате...

Запись в файл на удалённом сервере
Доброе время суток! У меня есть задача периодически дописывать данные в csv файл, который находится на облаке. Как это можно сделать? В сети ничего внятного не нашёл. Помогите, если кто-то...

Ошибка при работе с selenium
Здравствуйте, при работе с selenium'ом у меня вылезает ошибка. Код: from selenium import webdriver import time url = 'любой юрл' driver =...

Сайты и python
Я что-то слышал насчет того, что с помощью питона тоже сайты делают. Если так, то есть ли какие исходники и примеры?

Парсинг сайта: получение адресов всех магазинов
Добрый день! Есть желания получить адреса всех магазинов Пятерочка с официального сайта (5ka.ru/stores/). Проблема в том, что для получения адресов, нужно сначала выбрать город, затем сделать...

Ошибка ModuleNotFoundError: No module named 'werkzeug'
Здравствуйте, недавно начал использовать питон и почти ничего пока что не понимаю в плане исправления ошибок. Вот, что где выдает ошибку: import sqlite3 from flask import Flask, request,...

Selenium + Авторизация в Google
Здравствуйте! С недавнего времени Google стал блокировать авторизацию с помощью сторонних сервисов, например stackoverflow. Даже это решение не помогает:...

Selenium: переход на новыю вкладку
Имееться 2 вкладки. В первой выполнен запрос и успешно открыта страница. Вторая вкладка открыта и на данный момент активна. Выполняю поиск, но ищет почему-то в первой вкладке. Как забыть про первую...

Задержка на requests
Подключился к сайту через get. На этом сайте первые 5-10 секунд прогружаются задания, после чего они становятся видны. Соответственно и в структуре страницы html они появляются после 5-10 секунд...

Выгрузить табличные данные со страницы html
Здравствуйте! Очень надо получить данные со страницы, так как разработчик не будет скорее всего дорабатывать выгрузку в Excel, а сама выгрузка не включает некоторых (как-будто пустых) данных, а...

Cookie в requests
Доброго времени суток. Ребят подскажите может, необходимо в сессии requests вручную установить куки. Устанавливаю их через словарь, а затем requests.cookies.update(сюда словарь закидываю). После GET...

Scrapy-splash + Lua script, проблема с redirect после нажатия кнопки поиска
Всем привет. Я экономист и полнейший нуб в webscraping, но мне для дипломной работы в маге нужно собрать данные по ценам на билеты на автобусные перевозки (то есть, предприятие некоммерческое...

яндекс.практикум урок 8: Templates выводим данные в шаблон
задача: Пользователи вашего блога могут подписываться на публикации определённых авторов и получать их статьи на почту. На сервер придёт POST-запрос следующего содержания: { 'author': 'Роби...

Поиск по всем соцсетям постов по ключевым словам
Всем привет! Есть не хилое задание по веб поиску, хотелось бы услышать варианты умных людей как такое можно реализовать и возможно ли вообще. задание звучит так: 1. один раз в час по всем соц...

Selenium. как получить html элемента или страницы
Порылся в интернете и почему-то не нашел как можно с помощью селениума получить HTML код элемента. Подскажите как получить код хотя бы всей полностью страницы. Лучше конечно элемента.

Как обойти Cloudflare защиту используя Selenium/selenoid
Как обойти проверка на бота от Cloudflare используя selenium/selenoid(в будущем) Пример защиты

Requests - Русские символы в Username веб-сервиса
Добрый день! Прошу не судить строго, но столкнулся со следующей проблемой: есть веб-сервис, к которому нужно отправить soap-запрос, вся проблема в том, что username для авторизации в сервисе на...

Факт погоды с rp5.ru
Добрый день! Возникла необходимость оперативно получать фактическое значение погоды за прошедший период. Выбор пал на ресурс rp5.ru. Если рассмотреть на примере Москвы, то для получения факта...

Как вывести картинку в html-шаблон (название картинки беру из базы данных)?
в базе данных хранится название картинки pic1.jpg Нужно как-то вставить это название в тег <img src="{{ название картинки из БД }}"> Все выводится кроме картинки. Изображение скопировал во все...

Получить данные, введенные пользователем
Доброго времени суток! Есть вопросы по поводу того, как работать с данными введенными пользователем. Опишу всю задачу, т.к. может вообще не в том направлении двигаюсь. Результат хочу получить...

Удаленный хост принудительно разорвал существующее подключение
Добрый день, подскажите, как исправить эту ошибку. Программа отправляет файлы на virustotal для проверки. Структура файлов: Диск D ---- Dir1 ------Dir2------| ...

PyTelegramBotApi Обработчик кнопок
Здравствуйте, изучаю написание телеграм бота на python. Не могу никак разобраться, как из обработчика кнопок перейти дальше к игре. Буду благодарен за помощь! Ну токен естественно я убрал. import...

[Py2.7] Парсинг сайта с экспортом конкретной таблицы в Excel-файл
Здравствуйте. В университете мне дали 2 задания по парсингу: сайта и документа Word. Про парсинг сайта на Python я смотрела видео на Youtube. Конечно, автор работал в третьей версии. Я наклепала...

Смайлики в Python
Некоторые запросы комментариев выдавали ошибку при print(b.json()), поже я понял что во всем виноватые смайлики. import json не помогает. Как научить Python распознавать смайлики? Ошибка ...

Получить файл из Post запроса
Привет. Шлю себе на свой flask сервер файл пост запросом и не могу понять как его сохранить на стороне сервера. шлю так : $(function(){ $('#my_form').on('submit', function(e){...

Написать программу, которая разбирает (парсит) GET-запрос
Возможно, вы замечали, что в адресах некоторых страниц (URL) встречаются символы & и =, как на первой строке примера. Это — GET-запрос протокола HTTP, один из способов передать сайту некоторые данные...

Парсинг сайта BeautifulSoup
Самостоятельно занимаюсь изучением языка Python. Решил написать примитивный парсер сайта, используя библиотеку BeautifulSoup, мало того это код из видеоурока. # -*- coding: utf-8 -*- import...

Поиск и загрузка музыки с сайта
Есть сайт с музыкой. Я хочу сделать скрипт который будет вставлять поисковые запросы в строку поиска, а потом скачивать музыку. Я знаю как переходить от ссылки к ссылке и как собирать их со...

Парсер ситилинк
Пытаюсь написать парсер ситилинка, который соберет по папкам все ноутбуки. Вот код: import requests from bs4 import BeautifulSoup import os...

No module named models
импортировал как надо, но все равно ругается, я новичок в django, подскажите добрые люди в чем может быть проблема. Environment: Request Method: GET Request URL: http://127.0.0.1:8000/cart/ ...

Парсинг ajax
Добрый день. Необходимо спарсить все домены отсюда. При переходе на следующую страницу в браузере в инспекторе вижу POST запрос https://myip.ms/ajax_table/sites/2/own/376714. Однако при попытке...

Доработайте кликер. Сделайте так, чтобы при достижении 20 очков цвет кнопки менялся
Доработайте кликер. Сделайте так, чтобы при достижении 20 очков цвет кнопки менялся. Как сделать,чтобы цвет кнопки поменялся? from tkinter import * n = 0 # переменная для счетчика window =...

Автокликер по выбранным картинкам на сайте
Какая библиотека для Python может помочь для создания автокликера по определенным картинкам на сайте? (так же нужно исключить определенные картинки для нажатия)

С использованием urlparse получить из адреса кортеж значений
Считать с клавиатуры полный адрес англоязычной html страницы. С использованием urlparse получить из адреса кортеж значений. Получить с помощью регулярных выражений и вывести текст всех заголовков...

Не могу импортировать модуль ImportError: No module named
Добрый день. есть такая иерархия: Project -main.py -Tests --negative.py --positive.py --reports.py

Requests ошибка 500 в post запросе
Необходимо отправить словарь в пост запросе на страницу сайта. Открываю http://localhost:5000/post - выдает ошибку post 500 Не могу понять почему? Он же должен просто открыть страницу node? или я...

ModelChoiceField object has no attribute 'to_field_name'
Делаю форму, где одно из полей - поле для выбора одного из вариантов (select). Варианты - значения из БД одной из моделей. В БД внес 14 наименований для модели blog_cat. class...

Ошибка AttributeError (object has no attribute)
Уважаемые форумчане, подскажите, пожалуйста, в чём суть такой ошибки. Уже второй день бьюсь. Вроде пишу всё правильно. models.py class Users(models.Model): username =...

Счётчик посещений страницы
всем привет. такой вопрос, каким образом можно написать свой счетчик посещений? 1. в моделе иметь поле, счетчик посещении. 2. когда запрашивается страница, выполняется функция из views.py и...

Brython и другая замена джаваскрипту
Из статьи на ХабреBrython — это полноценный интерпретатор языка Python, работающий в браузере. Библиотеку можно использовать в качестве замены нативному javascript. Заголовок из статьи на...

Ошибка в установке библиотеки telebot
Подскажите,поэтапно, как с помощью библиотеки pip на языке Python3.6 установить библиотеку telebot(для Windows 7)

Метод get_text()
Добрый день всем. Пытаюсь заниматься парсингом, документацию прочитал, но всё равно не совсем понимаю. Сперва нахожу один блок, затем в нем нахожу другой т.е. спускаюсь по дереву вниз, далее...

Как отправлять данные на сервер с помощью Python и принимать их там с помощью php?
Здравствуйте, мне необходимо отправлять данные на сервер с помощью Python и принимать их там с помощью php. Подскажите, пожалуйста, как это можно сделать.

Как создать простой сайт-визитку?
Добрый день, недавно начал изучать Python и Django. Для понимания хотелось бы сделать сайт визитку, но не могу найти инструкцию или самоучитель, пошаговый. помогите, кто чем может. Имею знания лишь...

Функция: подготовка текста письма для почтовой рассылки
Напишите функцию, которая будет готовить текст письма для почтовой рассылки. В письмо подставляются аргументы: имя, место и дата встречи, email получателя. Если место не указано, в письмо должен быть...

Посоветуйте бесплатный хостинг
Желательно с простой регистрацией, чтобы без всяких там телефонных номеров, банковских карточек и прочего такого. Спасибо.

Парсинг html страницы картинок
Здравствуйте. Есть код: import requests from bs4 import BeautifulSoup as bs import random import lxml.html r = requests.get("https://www.google.ru/search?tbm=isch&q=яблоко") text = r.text

Post запрос для формы с через requests
Народ, подскажите пожалуйста Нужно сделать пост-запрос посредством библиотеки requests(желательно) для этой формы перед этим залогинившись <form method="post"> <input type="hidden"...

Как запустить скрипт (python), для постоянной работы на VPS сервере?
Есть скрипт на языке python. Есть vps сервер на digital ocean (чистая ubuntu, без установленных фреймворков). Как запустить на нём скрипт, который будет работать постоянно? Что я уже делал:...

HTTPS Отключить проверку сертификата. requests
Доброго времени суток. На сайте установлен сертификат от другого домена. Можно ли как-то отключить проверку сертификата или указать имя хоста вручную? import requests...

Авторизация на сайте через парсер Python
Хочу написать парсер для сайта, где необходимо пройти авторизацию, чтобы получить доступ к определённым страницам. Авторизацию делал по одному видосу. И вот здесь возникла проблема:...

Кодировать и декодировать unicode
Есть текст crkz = '\u0438\u0437 \u041a\u0438\u0442\u0430\u044f \u0432\u043e \u0432\u0441\u0435 \u0433\u043e\u0440\u043e\u0434\u0430 \u0420\u043e\u0441\u0441\u0438\u0438' Если вывожу на...

Удалить не нужные текстовые блоки из html
Есть большой html файл как из него удалить не нужные (лишние) html блоки? <script> (adsbygoogle = window.adsbygoogle || ).push({}); </script>

Передача изображения через socket
server.py import socket from threading import * import socket import pygame import pygame.camera from pygame.locals import * import cv2

Парсер авито
Всем привет, пытаюсь получить количество страниц с авито. То что пытаюсь сделать привел ниже, при печати выдает None. Что я не так делаю? Может есть другие способы? С парсерами до этого дел не имел....

Selenium - Python - Несколько браузеров
Добрый день. Планирую параллельно запустить несколько браузеров, для ускорения работы некоторой программы. Написал функцию, которая должна создавать несколько экземпляров браузера. def...

Дано двузначное число. Определить входят ли в него цифры 3, 6 или 9
Дано двузначное число. Определить входят ли в него цифры 3, 6 или 9.

Как отправить письмо с вложением?
Хочу сделать отправку картинки на почту самому себе установил вродеб все модули но выдают ошибки помогите разобраться.. from smtplib import SMTP_SSL import email from email.MIMEMultipart...

Вместо файла скачивается веб-страница
Привет. Пишу скрипт для загрузки субтитров с physkids. Пишу чисто для себя, чтобы можно было скачивать сериалы и смотреть их в оригинале. Алгоритм работы программы не сильно сложный: подключаемся к...

Дата в UNIX
Привет. Нужно перевести дату в unix time, но используя средства питона и онлайн калькуляторы, получаю разные ответы. import datetime import time #... start = "2018-01-01" start_split = dt =...

Авторизация на сайте requests
Здравствуйте, заморочился с авторизацией на сайте informatics.mccme.ru библиотекой requests.post, но что-то никак не удаётся, много чего перепробовал, но информация, найденная в инете, так и не...

Проверка на пустую строку
Имеется следующий html шаблон с формами в которые вводятся данные <meta charset="utf-8"> <h2> Передача данных методом GET </h2> <form action="/cgi-bin/form.py" method="get"> Имя: <input...

скачивание файла по url
есть файл txt на яндекс диске который скачивается скриптом и сохраняется как тхт файл но при открытии содержание файла это HTML страница. вопрос как скачать именно сам файл с его содержимым?( ссылка...

Парсинг названия популярных фильмов с сайта kinopoisk
Я попробовал написать программу, для парсинга названия популярных фильмов с сайта kinopoisk, только вот что-то не работает. Я новичок в этой теме, так что уж простите) import requests from bs4...

Ускорить программу написаную с использованием selenium
написал часть программы по парсингу сайта, используя селениум вебдрайвер(нужны были функции клика мыши на элемент "показать" для сбора элементов нужных), часть программы в том смысле, что имею 1...

ConnectionResetError: [WinError 10054]
url = f"https://anonfiles.com/L8pdAfL0x3/Check_exe" print(f"Url: {url}") rr = requests.get(url).text print(rr) Traceback (most recent call last): File...

'QueryDict' object is not callable
def new_user_registration (request): errors = if 'user' and 'pass' and 'email' and 'pass2' in request.GET: pass1 = request.GET('pass') pass2 = request.GET('pass2') if...

Правильная работа с файлами
Я написал небольшой скрипт, который разбирает текстовый файл со строками (разделенными табуляциями) в виде html, проводит небольшую их обработку и генерирует html, который собственно и нужен на...

Количество страниц
как супом получить количество на примере вот этого сайта http://www.work.ua/jobs-python/?days=125&page=1 там 5 всего последняя, но я не хотел бы привязываться именно к 5-ке, чтобы парсер был...

Определить хост по ip адресу
Доброго времени друзья! Помогите пожалуйста с задачей, есть список ip адресов в txt, мне надо проверить, есть ли у этих адресов какие нибудь хосты, и если есть, то записать их в отдельный тхт файл, а...

Вызов функции из другого файла
Всем, привет! Изучаю python, требуется ваша помощь)) У меня был файл run.py, в нём было: from flask import Flask app = Flask(__name__) @app.route('/') def hello_world(): return...

выведите лесенку из n ступенек, i-я ступенька состоит из чисел от 1 до i без пробелов
Задача 1 По данному натуральному n≤9 выведите лесенку из n ступенек, i-я ступенька состоит из чисел от 1 до i без пробелов. 3 1 12 123

При добавлении в шаблон русского текста выдаёт "'utf8' codec can't decode byte 0xf8"
Здравствуйте! При добавлении в шаблон текста на русском получаю ошибку UnicodeDecodeError at /test/ 'utf8' codec can't decode byte 0xf8 in position 693: invalid start byte Request Method:...

Как правильно хранить секретный ключ?
Здравствуйте! Как известно, разработчики Django категорически не рекомендуют хранить секретный ключ в файле settings.py В качестве альтернативы предлагается хранить ключ в переменной среды или...

Python + BeautifulSoup. Поиск содержимого в тегах
Всем доброго времени суток! Может кто подскажет как работать с содержимым класса? Конкретный вопрос: Есть класс с тэгом div, включающий в себя классы с тэгом span. Каждый класс со спэном содержит...

Как парсить только текст
Суть в общем такая, учусь писать парсер на питоне по одному видосу, паршу вот эту страницу https://www.weblancer.net/jobs/ правда сайт с пор видоса поменялся. но ничего вроде справляюсь, только вот...

Selenium, выделение текста на странице
Всем привет! Суть вопроса такова. Есть сайт, с генерируемой текстовой информацией. Мне нужно зайти на этот сайт, найти конкретный пункт, сделать выделение текста этого пункта. Выделение обычное,...

Вывод данных из БД в виде таблиц
Здравствуйте. Можете подсказать как вывести полностью всю таблицу из БД? Только начал осваивать джанго. Проработал весь учебник на сайте, и просмотрел некоторые дополнительные мануалы на нём-же, но...

Request.Response ошибка 400 bad request
Добрый день! Прошу помочь с обработкой запросов в Python 2.7.11 Принимать реквест и сохранить на сервере файл из него уже получилось, а отправить клиенту респонс пока никак. В респонсе должен...

Как вытащить вложения из сообщения (vk_api)?
Нужно принять картинку от пользователя и и отправить обратно Как можно это сделать? Ниже код не работает Заранее спасибо import vk_api from vk_api.longpoll import VkLongPoll, VkEventType ...

Интернет-магазин на python3 миф или реальность?
не знаю, кто и как... но не нашел в сети ничего подобного кто-нибудь знает подобное для торговли онлайн на pyhton? если нет, то почему эта тема не развивается?

Selenium не запускает браузер
Установил Selenium 3.0.0b3. Но до запуска браузера дело не доходит... Выдает следующее. Traceback (most recent call last): File...

Парсинг и замена текста в html (python3)
Приветствую Друзья, если не затруднит, подскажите решение для python3. Есть некий html файл, вполне себе стандартный, в нем среди прочего, есть конкретный блок span, выглядит примерно так: ......

Как объединить записи двух моделей с разным набором полей?
Здравствуйте! Столкнулся с такой проблемой. У меня есть три таблицы: в одной находятся электронные адреса, в другой имя пользователя — эти две таблицы я объединяю в модели class...

ЧЧФ
Размер файла — это целое число байт. Но в последнее время файлы достигают таких размеров, что учитывать размер в байтах, мягко говоря, не удобно. Поэтому все программы и системы показывают этот...

Ошибка No module named 'httplib2'
Добрый день Не могу разобраться с ошибкой при запуске скрипта. ОС - CentOS 7 Использую Python 3.6.4 Ошибка следующая: No module named 'httplib2' С помощью команды pip3 list я проверяю...

Ошибка "list index out of range"
Добрый день. Сталкиваюсь в пайтон с следующей проблемой: При вводе аргументов выдает "list index out of range". >>> a=int(sys.argv) Traceback (most recent call last): File "<pyshell#7>",...

Обход капчи linkedin сервисом 2captcha
Пытаюсь спарсить linkedin с помощью python+selenium+beautifulsoup,в любой рандомный момент он может выкинуть капчу,я погуглил и нашёл способ обхода капч с помощью сервиса 2captcha.com. Когда я начал...

Автотест на тестирование эндпоинта [GET]
Всем привет. Помогите решить задачу, с таким ниразу не сталкивался. Или ткните где есть примеры. Зайди на www.reqres.in и напиши автотест на тестирование эндпоинта SINGLE USER...

Как в jinja2 выйти из цикла?
Здравствуйте. Подскажите как выйти из цикла в jinja2. Описание задачи следующее: Приходит ответ от аякс запроса, в ответе (объекте) содержится свойство, значением которого является массив. Я хочу...

Нужен код автоматизации действий в браузере на Python
Здравствуйте уважаемые программисты! помогите с кодом на Python, а именно нужен код для автоматизации действий в браузере! зайти на сайт "http://mercury.vetrf.ru/hs" ввести логин и пароль нажать...

Как получить список видео с канала Youtube (с описанием)
Нашел только примеры, где используется ID канала, но я его не знаю. Знаю только имя канала.

Django админ панель испортилась
Здравствуйте! Подскажите, почему админка отображается неправильно? До этого всё отображалось хорошо. Вот так сейчас выглядит админка А вот так она выглядела до этого Помогите пожалуйста!

Обработка GET-запроса
Здравствуйте. У меня есть вопрос. Читая мануалы по питону я так и не разобрался как работать с GET-запросами в CGI. Объясню все на PHP-языке. Чтобы обработать GET-запрос в PHP нужно сделать...

LANGUAGE_CODE "en-us" must have a matching entry in LANGUAGES
Развернул проект на Django, настройки в settings.py подправил (данные по базе). При заходе на http://www.megalopolis.djangohost.name/ выдает ошибку - LANGUAGE_CODE "en-us" must have a matching entry...

Threading и selenium
Приветствую форумчан, никак не могу понять, в чем проблема. Собственно, вот мой код: import threading from queue import Queue from selenium import webdriver #driver =...

Проблема при парсинге
Всем привет! Помогите, пожалуйста, новичку решить проблему. Пишу парсер магазина. Скрипт постранично вытаскивает ссылки лотов и далее каждый лот парсит и сохраняет в файл. С первой страницей...

Получение кода html страницы по ее адресу
Прошу помочь с такой проблемой. Написал код для получения в файл кода страницы по заданному адресу сайта: import requests html1=requests.get('https://pwcats.info/kassiopeya/11208')...

Мгновенная проверка полей
Нужно: если два поля для пароля не идентичны друг другу и меньше 6 символов, то рядом с ними написать ошибку. Мои поля в модели: class Users_data (models.Model): .... password =...

Парсинг. Как сформировать запрос через поисковую строку сайта?
Привет всем. Я решил в качестве практики отпарсить https://www.livelib.ru/ на цитаты Пелевина, использовал метод get, сразу указав в адресной строке ссылку на начальную страницу с его цитатами вот...

Парсинг фото товаров с алиэкспресс в крупном разрешении
Хотел написать парсер фото товаров с алиэкспресс вместе с ссылками на сами товары, но когда, но не нашел ссылки на jpg, на превьюшки есть, а на сами фото не могу найти. Как их достать?

Beautiful Soup 4, сравнение html-парсеров при запуске в потоке
Здравствуйте, спарсил страницу с помощью lxml, встроенного в Beautiful Soup - выдал 30 секунд. Не поверил, начал искать ошибки и оптимизировать. Ничего конкретного не получилось, время парсинга...

Генератор цифры в слово
Работаю в django , нужно превратить число, например 34 000, в словестное выражение: тридцать четыре тысячи. Стандартное django.contrib.humanize не подойдходит. Если кто че знает, буду очень...

Как парсить vkontakte с Selenium?
Здесь код, а внизу скриншот. Как найти "Войти при помощи пароля", если код представлен в виде словаря? Фрагмент:"vkconnect_auth_switch_to_password":"Войти при помощи пароля" <!DOCTYPE html>...

Количество повторяющихся элементов в списке
Программа должна считывать одну строку со стандартного ввода и выводить для каждого уникального слова в этой строке число его повторений (без учёта регистра) в формате "слово количество" (см. пример...

Python + Selenium.Webdriver не видит элемент
Для создания теста необходимо, чтобы selenium нажимал на кнопку: <button class="sqdOP yWX7d _8A5w5 " type="button"><span>6</span> Пользователей"</button> Вот сам код: from selenium...

Selenium не находит элемент находящийся в модальном окне
Selenium не находит элемент находящийся в модальном окне. Модальное окно подгружается по средствам ajax скорее всего. И при попытке нажать кнопку находящуюся в этом окне, он сообщает что элемент не...

Не запускается сервер
Пишет следующее: ImportError at / cannot import name patterns Request Method: GET Request URL: http://127.0.0.1:8000/ Django Version: 1.3.1 Exception Type: ImportError

No module named 'telepot'
Установил модуль telepot : sudo pip install telepot sudo pip install telepot --upgrade Написал программу, в первой строке подключил модуль: import telepot При запуске выдаёт ...

Многопоточный парсинг
Добрый день. Возник следующий вопрос. Необходимо распарсить n-ое кол-во страниц одного сайта. URL отличается только одним параметром по сути. Были проведены тесты. При последовательных запросах к...

Установка Python 3 на Denwer
Всем привет, ребята подскажите пожалуйста как поставить Python 3 на Denwer.. Работаю над первым проектом на Python, но расширение ActivePython не подходит.. Фреймворк не предлгайте, я не...

Как парсить Википедию?
Написать функцию city_site(name), принимающую на вход название города и возвращающую строку, содержащую адрес официального сайта этого города, согласно русской Википедии. Если такого города Википедия...

Переопределение метода __format__
Здравствуйте. Может ли кто-нибудь показать пример, или дать ссылку, на пример переопределение метода __format__, как он должен переопределяться, чтобы иметь возможность отображать свой класс в...

Javascript + python requests
Салют всем) Возникла проблема, пытаюсь при помощи requests выполнить POST запрос на один из сервисов гугла, и в итоге выдает ошибку, мол 'необходимо, чтобы в браузере был включен JavaScript'. Порылся...

Как вывести содержимое таблицы?
В интернете полно примеров как в Питоне работать с базой, а как результаты запроса вывести в html через CGI, например? Помогите с примером, пожалуйста.

Как выучить Джанго?
Изучаю Джанго . Питон знаю поверхностно (лутц и собственны небольши. Эксперементы). По Джанго дочитываю книгу от Головатого и Каплан-Мосс. Практики там мало.. Думаю какие-нибудь видео уроки на ютуб...

Ajax+Python
Добрый день! Начал изучать ajax запросы и вот не могу найти нормальный полный пример python ответа на запрос. В JS при нажатии на кнопку отправляется ajax запрос к python. Необходимо, что python...

Прочитать html файл
Доброго времени суток! Нужно найти в html файле и записать в txt текст между тегами span #!/usr/bin/env python # -*- coding: utf-8 -*- out = open('out.txt','w') for i in range(1, 30): ...

Трансформация голосового сообщения в текст
Доброго времени суток, я создал чат-бота сообщества в Вкотанкте (бот функционирует на pythonanywhere.com) и решил добавить функцию распознавания голоса. Для реализации этой функции выбрал API Wit.ai,...

Как установить соединение с MySql?
Добрый вечер. Народ помогите установить соединение с MySql. IDE-Eclipse Python 2.7.3 Django 1.0.4 MySql 5.0 дрова установил. DATABASE_ENGINE = 'mysql' # 'postgresql_psycopg2',...

Получение параметров POST запроса. Selenium
Здравствуйте! Мне нужно парсить сайт (p-bot). Нашла POST-запрос, в ответе которого лежит нужная мне информация, но чтобы отправить этот POST-запрос, помимо вводного текста (текста сообщения), нужно...

Как выводить время в режиме реального времени?
Начал работать с Django. Создаем простую страничку,где выводиться текущее время и дата, время обновляется каждую секунду, например. Никак не могу сообразить как написать это. Просто вывести дату...

Простой веб-сервис на базе Python, который получает запрос и возвращает ответ после выполнения кода по API
Я два месяца назад начала самостоятельно изучать Python (это мой первый опыт программирования) и написала код, который на базе переменных, например, таких как название отеля, дата заезда, дата...

Отключение режима Webdriver (Python+Selenium)
Что дает нам отключение режима Webdriver (Python+Selenium)? Открываются какие то доступы? Напишите пожалуйста список плюсов и минусов отключения режима Webdriver (Python+Selenium)

Передать переменную python в js (или передать print на сайт)
Есть код html <div class="inputs-stroke__block"> <input type="text" id="translateText" class="input__wb"> </div> <button id="perevodClick" class="ddl">DDL</button> По кнопке все улетает...

Расшифровать шифр Плейфера (Playfair)
Дана только картинка https://yadi.sk/i/SqYiUnNFmBB3A

Поисковик по лицам из вк
Я подумал, вот было бы здорово, если взять это https://hackaday.io/project/12211-arduino-glasses-a-hmd-for-multimeter и вместо arduino поставить raspberry pi zero w. Потом залить на нее скрипт,...

Долгий ответ на https запрос к сайту
Добрый день. При отправке запроса через rest клиент, на ответ тратится около 400 миллисекунд. При попытке повторить тоже самое используя python, на ответ тратится более 8 секунд (без прокси). В чём...

Как получить элемент документа html внутри iframe Selenium Webdriver?
Добрый день. Например, есть html документ с тегом iframe и внутри расположен еще один документ html с тегами div. Нужно получить список div средствами Selenium Webdriver. <!doctype html> ...

Сайт на питоне - самое начало
Гуру, обьясните "на пальцах" на что это похоже??? Знаю РНР, немного Node-js... Теперь решил понять питон... На что больше похож питон в сайтах???? Это ближе к РНР? или к ноде? Обязательно...

Как настроить Nginx config, чтобы запустить Python скрипты
Можно ли связать Nginx + скрипты Python без использования uWSGI и фреймворков ? В общем, как на Apache - https://www.cyberforum.ru/python-web/thread2021561.html. Если можно, то как в таком случаи...

Простенький парсер для сайта
Всем здравствуйте) Пишу простенький парсер для сайта и столкнулась с проблемой: при попытке вывести содержимое блока (div или span) выводится либо пустой элемент beautifulsoup4, либо html код (если...

Бесплатные сервера
Здравствуйте ! Не можете помочь найти бесплатный сервер для размещения проекта ? (кроме pythonanywhere.com)

Начинающий веб разработчик
Не знаю насколько правильно написал в нужный топик, но все таки так или иначе связанно с Python, Django. Опишу ситуацию наверное большинства начинающих веб разработчиков: Сначала прочитал книгу,...

Как спарсить атрибут
Как спарсить значение data-value? <a href="http://site.com" data-ref="TopRates" data-type="price" data-value="1212749" data-changescale="1" data-market-id="curr_one"...

Авторизация на сайте, requests, post
Всем привет! Буду благодарен за помощь. Прочитал очень много примеров и решений, но ничего не помогло. Есть злой сайт - https://account.similarweb.com/login Не могу пройти авторизацию,...

Отправить фотографию в вк через Heroku
Нужно загрузить фотографию на сервер из интернета и отправить в вк. Думаю, мне хватит в качестве ответа где будет хранится эта фотография после ее загрузки через requests. Информацию найти не смог.

Как скачать плейлист с Ютуба?
Пытаюсь скачать плейлист с Ютуба с помощью pytube.YouTube(). Я так понял туда надо подавать в качестве параметра надо подавать ссылку на видео, а не на плэйлист. В принципе ссылки на видео внутри...

Selenium Chromedriver: quit() missing 1 required positional argument: 'self'
Здравствуйте. Сделал проект на Django/Python. Внутри проекта есть страница, на которой мы вводим в текстовое поле артикул товар, а потом часть кода парсит сайт интернет магазина и возвращает...

Как получить содержимое тега span
url = input("Введите URL:") info = requests.get(url).text soup = BeautifulSoup(info, "lxml") block = soup.find("div","item_desc_description") check_opis =block.find_all( 'div',...

Как создать страницу для добавления новых записей в базу данных?
Есть приложение, список компаний с разными параметрами( e-mail,телефон и т.д.). Можно ли создать html страничку, через которую в бд будут добавляться новые компании, с введенными данными ? И...

Полная прогрузка страницы
Делаю парсер на python. Через requests.get получаю страницу, но есть проблема. Она заключается в том что страница увеличивается если спускаться вниз. Пример: (Если открыть коменты под видео ютуба, то...

Срезы в jinja2
Есть вопрос: делаю сайт, и вот появилась проблема: у меня в бд есть таблица Articles там есть столбец text, я понял как передать данные из таблицы в html документ, и вот когда я пишу {{ art.text }}...

Ошибка кодировки при чтении из файла
Добрый день, коллеги! Читаю локальный файл при помощи urllib import urllib file_address="C:/work/stores/4067.html" file=urllib.request.urlopen("file:///" + file_address)...

Как передать параметры из form в метод view?
Здравствуйте! url.py urlpatterns = patterns('', url(r'^index/', last_stickers), url(r'add_sticker', add_sticker) )

Парсинг сайта
У меня есть парсер цен AliExpress, он на селениуме, проблема в том что он медленный, хотелось более быстрой работы, bs4 не видит нужные элементы (или я тупой( ), вообщем можно как-то побыстрее...

Python HTML CSS
Добрый день, подскажите как связать три файла. 1.файл python он же является запуском сервера, 2.файл html web-старица 3. файл css который дает окрас html файлу Если не понятно что и как могу...

Aiohttp method POST
помогите те кто работал c aiohttp как получить параметры из POST @asyncio.coroutine def hello_post(request): @dec(request) def work(): #как тут получить параметры какие...

'NoneType' object has no attribute 'find'
Всем привет. Столкнулся с одной неприятной и непонятной проблемой. при попытке вывода кода через принт выдает ошибку 'NoneType' object has no attribute 'find'. я догадываюсь,что не так, но исправить...

Как запустить парсер на Selenium с Android-телефона ( Pydroid )?
Доброго времени суток. Мне нужно, чтобы уже написанный скрипт (т.е., реализующий заданную логику) запускался с телефона. Возможно, с заменой драйвера браузера. Я нашёл Selendroid и Appium, но в...

Лучший браузер для парсинга
Здравствуйте всем. Скажите пожалуйста, Какой браузер лучше использовать для парсинга? Раньше использовал chromedriver, он потребовал постоянно обновится, потом перестал работать. Его...

Парсинг сайта на Python
1. Python 3.9 2. ОС Windows 10 x64 3. Версии используемых библиотек C:\Users\Artur>pip list Package Version ------------------ --------- beautifulsoup4 4.9.3 certifi 2021.5.30...

Ускорить парсинг страницы
Всем привет. Пишу парсер, все ок, все работает. Но, работает ДОЛГО. На одну функцию уходит больше 2 секунд, а их там 4 -_- from bs4 import BeautifulSoup from urllib.request import Request, urlopen...

Python, Selenium - как прокликать страницы
Добрый вечер. Подскажите, пожалуйста, как пройтись по всем страницам на сайте. Страницы переключаются js скриптом: <li> <a...

Selenium webdriver как узнать имя фрейма
Нужная мне страница после нажатия кнопки AJAX-ом подгружает данные. Если в Хроме на эти данные навестись то можно посмотреть код фрейма (по правой кнопки мыши), как мне в этот фрейм переключиться...

Selenium имитация нажатия гаряцих клавиш
После входа на сайт можно пользоваться горячими клавишами такими как: x v b . Я пробовал так: oop.send_keys(Keys.x) , но у меня не получилось.

Может ли питон залезть на сайт, авторизироваться и скачать файл?
Есть ссылка вида: https://....ru/personal/generate_yml.php?mode=csv Но при попытке сгенерировать csv, по данной ссылке открывается форма ввода логина и пароля. только после того как ввел,...

Авторизация на сайте с использованием средств языка python
Добрый вечер. Есть сайт с учётными записями студентов https://student.psu.ru Проблема в том, что когда студентам преподаватели выставляют баллы за экзамены, об изменении баллов не приходит...

Работа с сайтом
Подскажите, пожалуйста, как обратиться к сайту на Python за: 1) определенным ТЕКСТОМ (т.е. к классу сайта с текстом), 2) определенным ФАЙЛОМ (т.е. скачать файл). Можно использовать: 1) urllib3,...

Парсинг js с python, selenium, phantomjs
Здравствуйте! Вот страница https://1xmavemv.com/ru/live/Handball/ (не реклама) Возле каждого матча есть его время, в исходной станице оно тоже есть. Если кликнуть на любой матч, выделить время и...

Ссылки между страницами
Вообщем учу учу джанго, но вот не понял как реализовать переход с одной страницы на другую. Вот есть в templates страница Main_page, а как сделать переход на другую страницу лежащую тоже в...

Как реализовать вывод каталога товаров?
Здравствуйте, я только начинаю заниматься Django. Мне необходимо реализовать вывод каталога товаров, погуглив, я нашел что для этого подойдет jango-mptt. Вот только не совсем понятно как его...

TypeError unhashable type: 'dict'
Здравствуйте, возникла проблема с Django не могу никак вывести данные из бд (mysql в таблицу), возникает следующая ошибка: Exception Value: unhashable type: 'dict' Данные пытаюсь получить следующим...

Выполнить код на javascript в python программе
На сайте, который парсит мой скрипт, некоторые email скрыты специальными кнопками - пока не ткнешь, email не не отобразится. Использовать что-то типа Selenium\PhantomJS, c которыми я пока и не...

Импортировать excel в Google sheets
Привет! Есть ли возможность импортировать эксель файл (файл с данными, цветами ячеек и т.п.) в гугл таблицы? В документации на чистом API не нашел такого, со сторонними библиотеками нашел ток для...

Не могу получить ответ от python скрипта и на его основе создать список (зависимые списки js ajax python)
Привет! Есть необходимость сделать динамические списки при помощи js, ajax jQuery, Python. Данные в скрипт передал, сделал выборку по базе, по вот как вернуть ответ и как по нему заполнить поле...

Скрипт просмотра постов, которые лайкнул пользователь VK: ошибка
Привет, помогите разобрать в чем ошибка, нашел интересный скрипт для работы с вк через python, данная программа, смотрит какие посты лайкнул пользователь ссылка на...

Ошибка 404 при обращении к сайту через библиотеку requests
Приветствую, имеется код, который берет ссылки из csv файла и обращается к сайту через requests, но почему то выдает ошибку <Response >. Если эту же ссылку записать как URL = 'ссылка', и подставить...

Unicodedecodeerror 'utf-8' codec can't decode byte 0xd1 in position 0 invalid continuation byte
Всем привет, что делать если при открытии exe файла (я так понял, он написан на питоне, писал его не я) вылезает ошибка unicodedecodeerror 'utf-8' codec can't decode byte 0xd1 in position 0 invalid...

Как спарсить заголовок из title?
Подскажите как при парсинге считать текст из определенного тега title? # -*- coding: utf-8 -*- import requests from bs4 import BeautifulSoup as bs # parser url =...

Открыть pdf, rtf файл через Python
Подскажите, пожалуйста, одну вещь: Пользователь хочет выбрать один из файлов (будь то rtf или pdf). Выбрать и просто открыть этот файл. То есть должна быть интеграция с программами, работающими с...

Не импортируются модули
Скрипт использует две функции, одну из модуля request, вторую из parse. Импортирую следующим образом: from urllib.request import urlopen from urllib.parse import urljoin Выходят ошибки импорта...

selenium авторизация через куки
Хочу один раз авторизоваться и в след раз уже заходить через куки, но он почему-то не заходит. Вот весь код, скажите, что не так? import pickle from selenium import webdriver import time ...

Selenium и Vk
Ребят , срочно нужна ваша помощь. Пытаюсь написать парсер новостей вк. Возникла следующая проблема , новости подгружаются динамически, как мне их вытащить через Selenium? Спасибо

PyQt5. Заполнение веб-форм, получение данных со страницы
Добрый день. Нужно получить некоторые данные с веб-страницы и программно заполнить веб-форму. В приложении должна быть форма, на которой будет две кнопки, по нажатию которых будут происходить...

Как нажать на скрытую кнопку в selenium webdriver
Добрый день! Такая проблема... Не могу нажать на вроде бы скрытый элемент. Локатор к кнопке работает в DevTools, а через Selenium не найден... Посмотрел варианты, как через JS сделать элемент...

Обход капчи "Я - не робот"
Сабж Не приходилось пока возиться с капчами, поэтому вопрос в том насколько это проблематично. На форумах пишут что рекапча от Google (на скрине) самая суровая и что при клике на сервер уходит...

Парсер olx.ua на lxml
Изучаю видео Bебинар “Парсинг HTML на Python“ https://www.youtube.com/watch?v=n6x1pzlRK8A То, о чем задаю вопрос, показано примерно на времени 34 минуты 15 секунд. Не выводятся разделители, как...

Библиотека requests возвращает разный html код
В файл "index.html" я запихиваю метод .get() URL = "https://www.avito.ru/moskva/telefony/mobile/apple-ASgBAgICAkS0wA3OqzmwwQ2I_Dc" r = requests.get(URL, headers = HEADERS) req = r.text...

Как правильно отправить cookie в urllib
Добрый день. Получаю страницу авторизации: import urllib.request as ur import urllib.parse as up import re, gzip import http.cookiejar as hcj import http.cookies as hc #Данные для загрузки...

"stale element reference: element is not attached to the page document" при парсинге выпадающего меню с selenium
Вроде, исходя из логики всё учёл, всё верно... Но только первую итерацию нормально пропускает, но как только она заканчивается, валится ошибка stale element reference: element is not attached to the...

Selenium Python - выбор пустого элемента из выпадающего списка
Доброго времени суток! Вот уже второй день не могу разобраться с выпадающим списком... <thead> <tr><th data-col-seq="0">Ф.И.О.</th><th data-col-seq="1">One</th><th data-col-seq="2">Two</th><th...

Парсинг форума через BeautifulSoup - Python
Самостоятельно занимаюсь изучением языка Python. Решил написать примитивный парсер сайта, используя библиотеку BeautifulSoup это код из видеоурока, чуть чуть подправил его под другой сайт. Хочу...

Авторег на пайтон
Здравствуйте,я недавно начал усердно заниматься яп Python,в дальнейшем я хочу пойти работать на фриланс,ну и чисто для интереса я зашел туда посмотреть заказы,и меня заинтересовал вроде легкий и в...

Как отдавать файлы с сервера по запросу?
Здравствуйте! Непосредственно к вопросу: я научился загружать файлы на сервер через POST запрос достаю через request.FILES и сохраняю их как FileField(). На данный момент я пишу сервер для...

Выполнение Python-скрипта нажатием кнопки
Добрый день! Только начал изучать фреймворк Джанго. Подскажите пожалуйста каким образом будем выглядеть реализация подобного. Есть две формы. Данные из форм отправляются в скрипт. Скрипт возвращает...

Количество строк в таблице
Имеется таблица в html по типу <table class="table-1"> <tbody title> <tr></tr> <tr></tr> <tr></tr> <tr></tr> </tbody> </table> Как посчитать количество <tr>?

Клик по кнопке , вставка текста в input
Здравствуйте, интересует, как при помощи Python можно совершать определенные действия на сайте т.е клик по кнопке, вставка текста в область ввода, всё, что может обычный пользователь. Набрел на...

Поиск иконки на сайте и клик по ней
Подскажите, пожалуйста, как можно в питоне реализовать следующий алгоритм: На странице сайта найти и кликнуть по иконке, которая при нажатии в мозиле на "Исследовать элемент" имеет следующее:...

Парсинг olx.ua Python+requests+bs4
Пытаясь сделать парсер мобильных телефонов на сайте olx.ua столкнулся с проблемой:при отправке ajax запроса мне выдает вместо корректного номера телефона "000 000 000",хотелось бы узнать у знающих...

Импорт python в html
Всем форумчанам дарова, мучает одна проблема, хочу чтобы ты вводил что-то в форму html и оно отправлялось в python и оно открывало bd, я перепробовал всё что знаю и не знаю, без вашей помощи не...

Парсер olx, поиск номеров
Доброго времени! Никто в последнее время не парсил olx.ua? Проблема парсинга номеров телефона без селениума, раньше делал по токену "https://www.olx.ua/ajax/misc/contact/phone/DvfLv/?pt=", сейчас, я...

Удаление в строке всего что после /
Привет, есть скрипт на питоне #название файла fileName="file.txt" r= with open(fileName) as f: r=f.readlines() with open(fileName,"w") as f:

Перекодировать iso-8859-1 в windows 1251
Здравствуйте, спарсиг инфу с сайта в кодировке iso-8859-1. Так по крайней мере определил онлайн-кодировщик. Пытался перекодировать разными способами ...

Арифметическая операция и ошибка "unsupported operand type(s) for +: 'float' and 'str'"
x = input("Enter X") y = 1/1+2*x print (y) при отладке запускается без ошибок, но когда ввожу переменную "Х" то выпадает ошибка Traceback (most recent call last): File...

Python + selenium как кликнуть по кнопке , если xpath постоянно меняется(проверка на кликабельность)
//*/a/span //*/a/span Два xpath , одной кнопки. Находятся оба на странице(NoSuchElementException)не подходит, но кликнуть можно только по одному при этом либо по 1 либо по 2, каждый раз по разному....

Pyinstaller - пакет exe запускается вместе с командной строкой
Добрый день. Написал программу на Pythonю Скомпилировал файл exe средствами pyinstaller. Все отлично работает, но программа запускается вместе с командной строкой. Как запускать программу без...

Is not JSON serializable
Доброго времени суток всем! У меня вот такая проблемка! Есть такие вот данные {'question': , 'answer': , 'test':

Selenium может не находит элемент
Selenium не находит элемент Python необходимо найти элемент на странице и вывести его где есть @, нужно найти email на странице на страницу переходит Не рабочий код: ...

Отправка Request payload через Python requests
Помогите плиз отправить запрос такого типа(нижний прямоугольник) запрос выполняется к php скрипту Так же, как я понимаю boundary из Content-Type тоже передается в запросе, но как его получить не...

Многошаговый диалог с пользователем
Здравствуйте, уважаемые коллеги! С недавних пор самостоятельно изучаю Django и пытаюсь писать с его помощью скромный проектик. В процессе столкнулся со сложностью «идеологического характера», с...

Задача на Json
Напишите программу, которая распределит полученную информацию по двум категориям: то, что похоже на другие аналогичные планеты (same), и то, что отличает Солярис от других планет (different). ...

Как установить модуль в Windows?
Выполняю следующий код и выводит ошибку. Как можно исправить? Или в какую сторону искать? У меня стоит Python 2.7 и Windows 7 C:\modules-for-python27\sorl> python setup.py usage: setup.py cmd1...

Ошибка Response [401] при отправке запроса на нажатие кнопки. Requests
Есть header = headers_kz = { 'user_agent': a, #user agent генерируется выше 'accept': '', 'authorization': '685d6ce08*****e71f21006a4e4e7ed22b7602c4' } Вот сам запрос = resp =...

Авторизация с использованием post запроса на сайте
Моя первая попытка авторизации на сайте. import requests def autoriz(): session = requests.Session() url= 'https://zcoin.miningpoolhub.com/index.php?page=login' data=...

Ловлю 404 при попытке подключить js к локальному серверу http://127.0.0.1:5000/
Пытаясь выполнить задание, словил 404. <!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8"> <title>Imidge Bord</title> <script...

Синхронизация с базой данных в джанго
Приступил к изучению Джанго, выполняю первые шаги, дошел до синхронизации с базой данных, переходим в папку через терминал в нужную, пишем python3 manage.py syncdb и получаю ответ Unknown command:...

Как задать браузеру Firefox прокси с авторизацией в Selenium?
Приветствую форум, собственно, вопрос в заголовке :) В интернете уже долго ищу, но нет примеров именно для прокси с авторизацией...

MultiValueDictKeyError
пытаюсь залогинить(наверное так называется) пользователя форма html: {% extends "bc/index.html" %} {% block form %} <div> <form action = "" method = "post" class = "registration"> {%...

Почему Selenium не работает в Python 3.71?
Добрый вечер. Подскажите по вопросу: установил Python 3.71 на Windows 7.- успешно установил selenium командой pip install Selenium. - успешно импортирую selenium командой import selenium. -...

Отображение картинки на странице после отправка файла на сервер CGI
Добрый день, необходимо по заданию с помощью CGI загрузить файл на сервер. Делаю это так. Файл загружается, но по заданию ещё нужно отобразить на новой странице загруженную картинку. Как это можно...

Получить текст с сайта
Есть сайт http://fishburg.ddns.net/search?username=&year=&sort=&page= В нём есть колонка Username и колонка Password, как получить вывод вида username:password? Я сделал так: import bs4 import...

Как установить timeout на чтения файла в urllib.request.urlopen
Доброго времени суток. У меня возникла задача установить лимит времени на чтения файла. То есть если response.read() длиться больше 50 секунд необходимо перервать процесс, и продолжить выполнение...

Джанго. Личный кабинет
Здравствуйте, не могу понять почему во view в методе UserAccountView current_user ничего не принимает . Как испаравить данную проблему. Спасибо за Вашу помощь. Логин: admin3, пароль: zub

Python запись в базу данных Mysql
Привет всем. Помогите дописать код. T3: Внизу код, он работает так, пишет лог в базу. Но суть в том что он записывает все запросы тем самым заспамливает базу. Помогите подправить, чтобы он...

Не могу передать объект в функцию
Добрый день. Не получается получить доступ к атрибутам объекта User из функции Galerey. Что я делаю не так? import requests, re, json, wx class User(): def Auth(self): try:

Работа с HTML документами
1 осматривается два html документа (a и b). из а в b можно перейти за один переход, если в a-док есть ссылка(<a href="b">) из a-док можно перейти в b за два перехода, если в а-док есть переход ...

Как войти в личный кабинет?
Всем привет. Пытаюсь войти в личный кабинет https://sd.tom.ru/ через модуль requests и ничего не получается :( Покажите как код нужно написать пожалуйста )

Создать форму обратной связи
Решил заняться веб-дизайном. Вроде бы пока что было все хорошо. Язык разметки прост для понимания. Но вот столкнулся с проблемой - формой обратной связи. Я с Пайтон не работал... Был бы признателен...

Как в lxml найти элемент по атрибуту name?
На этой этой страничке нашел методы парсинга по значению id и class, а вот по name нету :( Вопрос в заголовке)

Selenium. Контроль загрузки страницы
Приветствую Вас! Подскажите, пожалуйста, когда мы с помощью selenium открываем веб-страницу, каким образом получить подтверждение, что страница полностью загружена? После получения такого...

Как правильно открыть страницу?
В скрипте питона пишу webbrowser.open("http://localhost:8080/insert.html", new=0), открывается страница в другой вкладке, почему-то параметр new=0 не помогает, а если запустить скрипт в другом...

Тема для Курсовой работы
Всем привет! Сейчас только начали проходить азы нейронных сетей и попросили придумать какую-нибудь несложну, но интересную тему по нейронным сетям! Понакидайте вариантов, пожалуйста, на какие темы...

ModuleNotFoundError: No module named 'flask_sqlalchemy'
Помогите с ошибкой ModuleNotFoundError: No module named 'flask_sqlalchemy'.Перепробівал почти все,ничего не помогает,помогите!Буду очень благодарен.

Python: selenium: raise exception_class(message, screen, stacktrace)
Заранее прошу прощения, но найти нормальный ответ в гугле я не смог, все примеры были слишком "сложные". Задача: Зайти на сайт, найти элемент. С точки зрения моего кода, ошибок нет, при попытки...

Сервер разрывает соединение requests/requests_toolbelt
После авторизации, отправляю на сайт 2-3 запроса для получения кода страницы и один multipart запрос. Проделав раз 10-15 подряд действия после авторизации, вылетает такая ошибка:...

Свой HTTP proxy
Некогда уже поднимал схожий вопрос. Попробуем зайти с другой стороны. Простейшие клиент-сервера на сокетах ваял. Хочется фильтровать трафик, идущий на толстый клиент - браузер. С целями adblock....

Парсер html, вытащить текст класса
Вытаскиваю html, но не могу понять как забрать порт прокси, вроде нашёл нужный селектор, но когда беру текст этого тега и класса, то порта там нету. В Html видно что порт находиться ещё в одном...

Распознать изображение на участке экрана и нажать на кнопку
нужно написать код который будет распознавать изображение на маленьком участке екрана и нажимать на кнопку например 1 если изображение другое нажимать ан кнопку 2 если 3 на 3 и так далее (я так...

Парсинг страницы python и получение запроса (beautifulSoup, requests)
Здравствуйте. Суть проблемы заключается в том, что для парсинга я получаю страницу, где должна быть таблица с данными, но в print(r.text) выводится только html код без таблицы. Сама она (таблица)...

Программа периодически вылетает с ошибкой
Пишу чат-бота для вк. Работает минут 15 и вылетает вот с такой ошибкой: requests.exceptions.ReadTimeout: HTTPSConnectionPool(host='api.vk.com', port=443): Read timed out. (read timeout=10)...

Снять скриншот определенной области страницы, используя Selenium
Всем доброго дня. Selenium умеет снимать скриншот всей страницы на ура: from selenium import webdriver driver = webdriver.Firefox() driver.get('https://ya.ru')...

Простейший скрипт отправки заполненной юзером формы html на мой электронный адрес
Всем привет! Подскажите, пожалуйста, алгоритм скрипта, который будет отправлять заполненную форму на мой адрес электронной почты. В python'е я новичок, буду также благодарен объяснениям. В гугле...

Скачать фото из вк
Здравствуйте, всем. Иногда вконтакте кидают ссылку посмотреть все изображения. Мне необходимо скачать их все. Всё было легко бы, если бы не но. Я через BeautifulSoup получаю совсем другой код...

Парсинг html
Здравстувуйте. Начинаю изучать python. В качестве тренировочной задачи делаю такую Есть html страница. В ней есть столбец имя человека и email Как сделать так, чтобы если имя совпадало с Коля,...

Ошибка кодировки при чтении из файла
При попытке выборки данных по определенным тегам из сохраненного файла при помощи BeautifulSoup, появляется сообщение UnicodeDecodeError: 'charmap' codec can't decode byte 0x98 in position 22072:...

Как сделать одну валюту на торговой площадке steam
Как можно изменить валюту торговой площадки стим? Есть вот такой простенький код https://**********/a/dALhy5R При запросе выводит стоимость в разной валюте https://**********/a/f7LogrX Может быть...

Загрузка файла на сервер
Не могу разобраться с загрузкой файла на сервер. Поискал информации в интернете, и пока вот как разобрался (файл не загружается, и ошибок Python не выдаёт). Как можно доделать скрипт, чтобы файл...

Извлечение заголовков в BeautifulSoup
Подскажите, почему не извлекается содержимое тэгов h3? import requests from bs4 import BeautifulSoup as bs r =...

Python unicode и urlencoded
Добрый день. Подскажите по следующему вопросу. Отправляю POST запросом сообщение. Если отправляю на сайте в браузере, то слово "Привет" отправляется как unicode...

Selenium chromedriver выдает критическую ошибку в headless режиме
Без headless все работает без ошибок. Как только добавлю --headless, вылетает критическая ошибка: Exception in thread Thread0: Traceback (most recent call last): File...

Выбор языка для создания портала
Дорогие друзья, есть такие исходные условия. Есть один сотрудник - программист на php, уровень знаний средний. Опыта использования фрейворков нет, опыт несложного ООП есть. Зато нет опыта...

Python без фреймворков
Друзья, только начал изучать Python, подскажите пожалуйста - возможно ли писать сайты на Python без применения фреймворков? И насколько это усложнит работу?

Скачать файл с яндекс.форм
Доброго времени суток. Помогите студенту, автоматизировать процесс скачивания файла с Yandex.форм.

Проблема с массивами JSON в python)
мне нужно достать из JSON значение "P", который находится в массиве "E", который находится в массиве "Value", как это можно сделать?)

'QuerySet' object has no attribute 'id'
делаю редирект на страницу с созданной статьей после сабмита формы: моель: class Article(models.Model): title = models.CharField(max_length=200, unique=True) # уникальное поле author =...

ElementTree и FB2: ParseError в файлах cp1251
Занялся я тут на досуге парсингом fb2-книг. Использую Python 3x, компонент xml.etree.ElementTree. Случилась у меня засада. Если файл в кодировке ANSI, то постоянно появляется ошибка ParseError....

Авторизация в личном кабинете platformaofd.ru
Пишу код авторизации в личном кабинете. Но почему то сервис каждый раз возвращает окно логина. import requests with requests.Session() as session: url = "https://lk.platformaofd.ru/web/login"...

Не подключается bootstrap
В django проекте в корневой директории проекта находится папка static, в ней три папки бутстрапа css, font и js. Вот сам html файл. <html> <head> <link...

Парсер таблицы
Здравствуйте, написал парсер для таблцы с выгрузкой в csv, но информация в таблице без каких-либо разделителей и все в 1 ячейке. Как можно разделить все данные по соответствующим ячейкам? Вот скрипт...

Проблема с кириллицей при парсинге
Microsoft Windows (c) Корпорация Майкрософт (Microsoft Corporation). Все права защищены. C:\Users\admin>chcp Текущая кодовая страница: 866 C:\Users\admin>CHCP 65001 Active code page: 65001...

Парсинг сайта через прокси
Здравствуйте! Купил прокси и не могу через них подключиться. import requests from requests.auth import HTTPProxyAuth headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64)...

При запуске manage.py выдаёт "Error: No module named polls"
Доброго времени суток. Такая проблема. Выполняю все по туториалу - http://ait-susu.narod.ru/django.htm. На стадии "Активация моделей", при команде manage.py sql polls вылетает ошибка Error: No...

Парсинг текста на сайте с защитой от копирования
Уважаемые форумчане, прошу помощи: есть сайт с текстом книги, но он защищен от копирования. Помогите спарсить весь текст книги в файлик. https://prodaman.ru/safonova/books/Lunnyj-veter?page=1

Как получить следующую страницу сайта
Здравствуйте. Не могу получить следующую страницу сайта. Проблема в том, что каждая страница сайта имеет новое название главы и номер главы. Пример адреса страницы: ...

Как в Selenium открыть в новой вкладке ссылку, доступную по событию javascripta?
Здравствуйте. Подскажите, как с помощью Selenium открыть в новой вкладке страницу, переход на которую осуществляется с помощью javascripta по событию нажатия на элемент? Задача в целом - для каждого...

Парсинг ::before with BS4 (псевдо-класс)
Я пытался запарсить данные таблицы на это сайте. Но у меня не вышло запарсить псевдо класс ::before url = 'https://kant-sport.ru/sports/skiing/svobodnoe-katanie/' # Getting whole page page =...

Создать собственный видеохостинг
Покидайте материалов по разработке видеохостинга на Python. Интересуют такие вопросы как: 1. Какие требования к аппаратной части и ОС 2. Архитектура видеохостинга 3. Адреса хостеров с наиболее...

Как пройти ReCaptcha
Периодически в браузере запущенном с помощью Selenium приходится проходить ReCaptcha. Проблема в том, что в эмулированном браузере чтобы пройти рекапчу мне нужно тыкать на светофоры и велосипеды по 2...

Передвинуть элемент, используя Selenium
Добрый день, у меня возник вопрос, как, используя Selenium, передвинуть элемент(на фотографии) ...

Парсинг описания товаров с Aliexpress
Всем привет! По url через request requests.get(url) получаю отдачу по товару например, https://ru.aliexpress.com/wholesale?catId=202000095&initiative_id=AS_20170625123903&SearchText=delonghi и...

SELENIUM | как узнать скролл страницы
Есть ли в selenium способы узнать на каком скролле по y находится страница, то есть если страница не скроллена, y = 0, если скроллена, то показать на сколько

Отправка файла на сервер CGI
Добрый день, необходимо по заданию с помощью CGI загрузить файл на сервер. Делаю это так. Файл загружается, но по заданию ещё нужно отобразить на ноавой странице загруженную картинку. Как это можно...

Python и Qiwi
Здравствуйте как с помощью питона , авторизоваться на киви , и возвратить из отчетов преведеннную сумму

Получение значения из xml
Всем привет! Подскажите пожалуйста, как вытащить значение “Param” из xml следующей структуры: <?xml version="1.0" encoding="UTF-8"?> <S:Envelope...

Как ввести текст в поле даты Selenium
Вопрос не из сложных, но почему-то для меня он сложный.... Я знаю метод send_key(), но почему-то в поле дата он не вводит дату. from selenium import webdriver from time import sleep import...

Лайки-дизлайки
Здравствуйте, создаю сайт по кинофильмам , сейчас я хочу добавить систему лайков, но встретился со следующей проблемой это то, что мне выводится сообщение невозможно найти путь. Прикреплю к этому...

Selenium, не работает Keys
from selenium import webdriver from selenium.webdriver.common.keys import Keys from selenium.webdriver.common.by import By from selenium.webdriver.support.ui import WebDriverWait from...

Передача пароля при авторизации
Добрый день, форумчане. Столкнулся с дилеммой в Django. Хочу использовать стандартные средства для работы с пользователями. Но проверка пары логин/пароль методом auth.authenticate() требует пароля...

Вывод параметров GET
Доброго времени суток! Есть задача вывести название метода запроса и его параметры. При помощи return HttpResponse(request.method) выводится метод (GET) .но как взять параметры не знаю. Попытки...

Как сделать, чтобы парсер переходил на нужные страницы пока есть нужный
Здравствуйте, при парсинге сайта мне сайт не отдаёт всю пагинацию, а только 3 страницы, но отдаёт кнопку загрузить ещё, которая перебрасывает на следующую страницу. Как мне сделать чтобы парсер...

Подставить в url кириллицу
Добрый день, не понимаю как заставить питона "заэнкодить" из словаря киррилические символы, ниже пример двух функций, помогите пожалуйста. Чтобы понятнее было, например после ввода города "Москва",...

Парсинг на bs4
есть вот такой код import requests from bs4 import BeautifulSoup as bs url = 'https://1xstavka.ru/live/' page = requests.get(url) soup = bs(page.text, 'lxml') match =...

Ошибка: TypeError: not all arguments converted during string formatting
Всем привет) В Пайтоне по теме веб впервые поэтому обращаюсь за помощью) Код: #!/usr/bin/env python3 import serial import time import datetime from datetime import datetime import re

Сквозная авторизация в браузере
Ребята, подскажите. Вопрос: как пройти сквозную авторизацию (используя системную учетную запись) на сайте через модальное окно самого браузера (Mozilla Firefox)? Использую Selenium актуальной версии....

Bs4 поиск классов
Я пытаюсь составить список холодильников с сайта "Ситилинк". Когда я ввожу класс Блока, в котором находится название холодильника, мне выдаёт пустой список: import requests, bs4 url =...

Npm ERR! missing script: dev
Импортировал с гитхаба проект шаблона для vue и хочу подключить его в систему переименовал папку, создал новый package.json наполнил его требуемыми для работы модулями делаю npm install -...

Авторизация при парсинге
Хотел спарисить эл. дневник, собственно для этого и нужно войти в кабинет. Код стандартный но сайт не может распознать данные. Результат(часть): <div class="site-error"> <div class="alert...

AttributeError: 'function' object has no attribute 'randint'
У меня не работает модуль рандома Хостинг: pythonanywhere.com Скрин:

Selenium Не запускается Chrome
Добрый день, не запускается Chrome в этом коде. Ошибок не выводит, скрипт грузит, а потом закрывается без запуска браузера. chromedriver уже прописан в PATH Сам Google Chrome установлен И...

Get_context_data() missing 1 required positional argument: 'request'
Вообщем какой error выкидывает. Ругается из-за request'a через который я присваиваю к get_user. class PostList(generic.ListView): model = Post tempalate_name = 'blog/post_list.html'...

Многопоточность и sqlite. Странная ошибка
Писал скрипт для работы с Вконтактом. Для пущей скорости начал пытался использовать многопоточность, в которой, к сожалению, не особо разумею. В конце концов уперся в ошибки вида ...

Как добавить переменную в тело json. Цикл на python
Здравствуйте, проблема следующая. Нужно отправить несколько сотен json сообщений, так, чтобы содержимое не было идентичным. Одно сообщение с помощью python requests успешно отправляется. Цикл в...

Selenium найти локатор кнопки
По причине того, что не могу постоянно находиться дома, пишу себе бота для автоматической покупки товаров с аукциона по выгодной мне цене. Выбрал конечно же selenium (firefox) . Загвоздка возникла...

Urllib vs requests
Использование urllib и requests: requests - import requests, re import urllib.parse as up #Данные для загрузки страницы авторизации url = 'https://www.nn.ru/auth/' headers = {

Отправить Post запрос requests
Вот все данные и код - Я все скопировал точно так же cookie = { "__cfduid":"db8684dfdab0ab41bbfdd34a2a21632511562734156", "_ga":"GA1.2.1499154119.1562734201", ...

Урок 8: Templates: алгоритмы отдельно от оформления от Яндекс.Практикум
Помогите с решением задачи! Сделал, как мне показалось, все правильно Но возникает ошибка: Страница /articles/check-age не найдена, проверьте этот адрес в urls.py Проверяю, но в urls.py этот адрес...

Авторизация на openedu.ru
Привет всем! Мне тут захотелось авторизоваться на openedu.ru исользуя requests. Но вот вдруг возникла проблема, при использовании следующего кода import requests from html.parser import * ...

Сделать счётчики: посещений, загрузок, нажатий на кнопку
Нужно сделать счётчики для числа посещений страницы, счётчик загрузок файла и счётчик для нажатий кнопки. Как это делается? Значения хранятся в БД PostgreSQL

Python парсинг, извлечение данных из таблицы
Здравствуйте, всем. Изучаю парсинг сайтов на практике с помощью BeautifulSoup. Допустим нашли блок с нужными тэгами, как извлечь определённый тэг из блока? Можно через костыль, как...

Парсер авито
Я новичок в деле, строго не судите. Делаю парсер для авито, просто ради практики, столкнулся с такой проблемой: нахожу количество единиц товара, которое отображается на странице: pcs =...

Проверка лицензионного ключа
Добрый день, хочу в свою программу внедрить проверку лицензионного ключа, чтобы если кто-то другой скачал прогу, не мог ей пользоваться. Начнём с того, что темой связки клиент-сервер я никогда не...

Работа с com портами и построение графиков
Всем привет! Есть необходимость создать веб сервер на linux, который работает с несколькими устройствами по com портам (управление, получение данных) и строит график по полученным данным. Возможно...

Почему цикл обрывается? Парсер на Selenium
Парсю страничку селениуом https://www.oddsportal.com/events/ Пытаюсь вытащить ссылки из меню таблицы. Те, которые, видны - вытащил без труда. Но вот дошла до выпадающего списка, столкнулся с...

Посчитать живые ссылки на изображения в заданном html
Помогите решить задачу Дана ссылка на HTML документ. Посчитайте количество живых картинок в нем. Живой картинкой назовем тег <img ... src="url" ... >, который отображается на странице, в...

Не получатся указать путь к шаблонам
Не получается указать путь к файлу html Прописываю в setins.py TEMPLATE_DIRS = ( 'C:/django_code/firstapp/firstapp/templates', ) не получается Сервер пытается найти файл в...

Можно ли запустить скрипт на python из под JavaScript?
В общем есть скрипт на python, он строит график с помощью библиотеки matplotlib, эти графики мне надо вывести на веб-страничке, график строится по данным за определенную дату или определенный...

Добавление данных в таблицу БД в цикле for. sqlalchemy PYTHON
Помогите с кодом Python. Нужно скопировать записи с БД с заменой одного значения. Есть модель БД: lass Group(db.Model): """ Group model """ __tablename__ = "group" id =...

Как передать date.today в переменную?
Вот этот код работает: def quote(request): return HttpResponse( date.today() ) А этот нет: def quote(request): data = date.today() return HttpResponse( data )

Галерея изображений на Джанго/ХТМЛ5
Всем привет, Подскажите пожалуйта какие компоненты есть для наиболее оптимального решения следующей задачи. Мне нужно используя Django и HTML5 реализовать следующее 1. Мультипользовательский...

Selenium Chrome динамическая смена IP
Доброе утро. Начал использовать Selenium. Используя браузер FF научился менять динамически IP. Но так и не нашел как это осущиствить для Chrome. А именно зайти на страничку например mail.ru под...

Скрабинг значений с сайта расписания
Привет, я начинающий Pytonист, стоит задача получить 2 значения с сайта расписания поездов. (Время отправления и количество свободных мест) Сам сайт с которого будем парсить значения...

TypeError: 'module' object is not callable
Недавно начал учить Django и столкнулся с вот такой вот проблемой. Искал в интернете, везде ситуативно и не особо понятно. При заходе на страницу входа выдает "TypeError: 'module' object is not...

Python+selenium как продолжить цикл если не находится элемент
Есть цикл, который переходит из бд по ссылкам и ищет элементы. Бывает , что на странице нет этого элемента и цикл прекращается. Так вот ,что добавить , чтобы если не нашел элемент, цикл переходил к...

__init__() takes at most 3 arguments (4 given)
Доброго времени суток. Сейчас разбираюсь с vk API. И у меня возникла проблема. Есть строка: vkapi = vk.API(app_id, login, password) Интерпретатор выдает ошибку: TypeError: __init__() takes...

Парсинг сайта с книжечками. Проблемы с пагинацией
В образовательных целях, сделал парсер. Парсил goodreads. Как бы, самый подходящий ресурс, ИмХО. Амазон море инфы по авторам книг, но - лютая паранойя. Только и спрашивают капчу - ну нафиг, html...

Selenium WebDriver перестал проходить проверку Cloudflare
Использую селениум для получения доступа на сайт с cloudflare. Третий день ни один из браузеров (Chrome, Firefox, Opera) не может пройти проверку. Постоянно висит заглушка о ожидании 5 секунд, только...

Спроектировать класс Imagenator для работы с изображениями
Изобразительный помощник Ограничение времени 60 секунд Ограничение памяти 64Mb Ввод testmodule.py Вывод output.jpg В этой задаче Вам требуется спроектировать класс Imagenator. У этого класса...

Парсинг таблицы pandas
Здравствуйте,пытаюсь получить таблицу с сайта.Но она искажается при получении(Дублируются первые 3 столбца), таблица смещается и создает столбцы Unnamed.Не могли бы вы подсказать,как можно решить эту...

AttributeError: 'NoneType' object has no attribute 'text'
Вот отрывок из кода: for i in soup.find_all('div', class_ = 'info'): title_sxodim += i.find('a', class_ = 'title').text.strip() + '\n' price_sxodim += i.find('a', class_ = 'str...

Запуск Python скрипта на VPS
Добрый день У меня есть скрипт на Python, который должен обрабатывать результат работы скрипта на PHP Проблема в том что не могу запустить скрипт Python на VPS сервере (сервер на CentOS с панелью...

Парсинг РТС-Тендер
Добрый день! Пытаюсь написать парсер для сбора информации по аккредитации участников на данной площадке, передаю вроде все необходимые параметры, но меня кидает на первую страницу. Прошу помощи, т.к....

Нет коннекта к базе данных
Пробую создать блог по этой инструкции. И на моменте сохранения созданного поста выбивает ошибку "pymongo.errors.ServerSelectionTimeoutError: localhost:27017: Подключение не установлено, т.к....

Не получается вытащить название через Selenium Python
Имеются Яндекс Картинки, нужно получить название любой из картинок <div class="PopularRequestList-SearchText">"КартинкаНазвание"</div> пробую через селекторы, class-name, xpath и всё...

Запрос и методом из selenium не может найти объекты на странице
Всем привет, меня тут попросили сайт протестировать (borya.kuzin.80@inbox.ru: 05122022 тестовые данные) В общем авторизацию прохожу в скрипте, дальше страница с несколькими кнопками. Беру ...

Socket приём данных по одному каналу
В Python возможно отправлять и получать данные от каждого клиента отдельно. Можно ли получать и отправлять данные по общему каналу?

Установка библиотеки Python для MySql
Я установила Python и Django, mysql 5.1, осталось только установить эту библиотеку Python для MySql(http://djbook.ru/ch02s05.html), но я не уверена какие установки нада выбирать. В readme-файле...

Выучил python. Что дальше?
Господа, хочу писать сайты на питоне, знаю маленько html, css, выучил синтаксис питона, могу писать маленькие программки. Но как его применять в вебе ума не приложу, куда что на нем на странице...

Куки в requests сессии
Удаляются ли куки при выходе из сессии? import requests with requests.Session() as s: s.get('http://google.com') или их нужно явно очищать? import requests with requests.Session() as...

Как парсить данные с сайта если они постоянно изменяются?
import time import requests from bs4 import BeautifulSoup headers = {"User-Agent": "Mozilla/5.0 (Windows; U; Windows NT 6.1; en-US; rv:1.9.1.5) Gecko/20091102 Firefox/3.5.5 (.NET CLR...

Как запустить python скрипт на сайте через кнопку?
Нужна помощь. Нужна кнопка на сайте которая будет запускать python скрип, и как реализовать этот запуск(скрипт одно значение в txt файле, на другое). Много информации было просмотрено, но к ответу...

Склейка url
Подскажте как склеивать урл? domain = 'http://google.com' url_part = 'search' print(joinurl(domain, url_part)) <<< http://google.com/search

Selenium дамп куки и загрузка из дампа в Chrome
Добрый день! Только начинаю разбираться с selenium'om из возник вопрос: как при работе с Chrome оставаться авторизованым на каком-то сайте? Гугл привел меня на эту ссылку:...

Научите пользоваться моим сайтом на джанго
Есть сайт на джанго. администрировать сайт некому, а надо. Я заказал сайт фрилансерам, а те не доделав сайт, бросили меня и теперь, разочаровавшись в людях я намерен сам изучить джанго и доделать...

Неверный аргумент
Друзья, всем привет! Являюсь абсолютным новичком, сначала опишу, что я хотел сделать. Что есть: .xsls файл, где 1 лист, в котором всего 1 столбец с 192 строками, в которых указаны url-ссылки Что...

Картинка в тело письма email PYTHON на Linux
Добрейшего времени суток, друзья. Суть вопроса, мне нужно встроить картинку в тело письма(именно в само письмо, а не вложением к письму) на python. Пользуюсь Linux (Ubuntu) Плюс кo всeму надо...

Парсинг содержимого страницы, которое формируется через AJAX
Доброго времени. Подскажите как можно реализовать парсинг содержимого, формируемого AJAX? BS4 не делает request на AJAX, а парсит начальный html.

Парсинг ajax.php через requests
Добрый день! Пытаюсь спарсить страницу сайта ЖК. При разборе через инструменты разработчика firefox вот этого сайта: https://bestcon.ru/realty/krylatskiy#shaxmatka я обнаружил такой POST-запрос на...

Почему reader.readline() не корректно работает?
Добрый вечер. Есть код который в цикле считывает информацию из объекта reader: while True: line = await reader.readline() if not line: break ...

Не отображаются модели в админке
Здравствуйте. Изучаю джанго, по инструкции создал модели, активировал админку и должны быть что-то типо: (вложение) но у меня есть только Auth и Site. В чем причина? почему модели не...

Калькулятор
import argparse import sys try: arg = argparse.ArgumentParser() arg.add_argument("arg1", type=int, nargs="+") arg.add_argument("arg2", type=int, nargs="+") args =...

Ввести текст и нажать на кнопку
Как м помощью библиотеки requests или urllib.request ввести текст и нажать на кнопку на сайте https://www.roblox.com/login? Есть ввод текста: <input id="login-username" name="username"...

Как запустить скрипт Python на хостинге
Здравствуйте! Заранее прошу прощения - с Python сталкиваюсь впервые. Ситуация такова: На хостинге есть некая папочка try, в которой на php написан парсер, который ежедневно автоматически скачивает...

Как выполнить код функции после полной загрузки формы wxPython
Добрый вечер. Как выполнить код функции после полной загрузки формы wxPython?

Подскажите, как организовать профиль пользователя или личный кабинет пользователя
Я изучаю jango и не могу разобраться как организовать личный кабинет пользователя, чтобы после ввода логина и пароля пользователь попадал в личный кабинет

Отображение загруженной картинки на новой странице
Добрый день, необходимо по заданию с помощью CGI на языке Python загрузить файл на сервер. Делаю это так. Файл загружается, но по заданию ещё нужно отобразить на новой странице загруженную картинку....

Установка модуля в Python
Здравствуйте товарищи программисты. Помогите пожалуйста с проблемой. Сегодня решил заняться изучением Python, но сразу же возникла беда - не могу понять как в Python устанавливаются модули. Я...

Простой веб-сервер с directories walk
В общем, на просторах инета уже многовато поискал информации, но сложновато все структуризировать и создать свой план действия. Смотрим скриншот, что мне нужно. Дальше я бы хотел услышать как мне...

Авторизация на форуме
Доброго времени суток! Пытаюсь авторизоваться на форуме, чтобы парсить список новых тем. Использую requests и beatifulsoup. На странице с авторизацией нашел по тегам нужную форму для логина и...

Вывод результатов цикла в шаблон HTML
Здравствуйте! Есть функция: def vacancys(request): category_list = Category.objects.all() count=0 for item in category_list: c = Category.objects.get(pk=count+1) v...

Пишем свой веб-сервер на Python
здравствуйте, если гуглить по сабжу-материала полно, опробовал один - не добился нужного, а именно: после ввода в браузере, например '127.0.0.1' получить страницу с текстом 'Hello, world' есть у...

PyMySQL Python TypeError: not all arguments converted during string formatting
Всех приветствую. Программа выдает ошибку TypeError: not all arguments converted during string formatting Пробовал ставить формат в string но не кати. В питоне недавно( Подскажите а?) Код: ...

Получить двоичное представление mp3 файла
Пытаюсь работать с SpeechKit от Яндекса. Я недавно начал изучать питон и нигде не могу найти Яндекс просит отправить в POST-запросе двоичное содержимое звукового файла, но скрипт, который они...

Переход на другую страницу
Начал учить только django, так что сильно н пинайте У меня есть две страницы: главная и страничка с, допустим, таблицами. Мне нужно с главной страницы сделать ссылку на страницу с таблицами. ...

Загрузка страницы в beautifulsoup
Привет, форумчане! Столкнулся с проблемой: при выгрузке в beautifulsoup страница целиком не загружается. Или потому что внизу страницы есть кнопка далее/еще/больше, которая догружает страницу, или...

Не получается спарсить сайт ( в качестве обучения )
Хочу в качестве обучения спарсить историю игр ( а точнее результат матчей "победа поражение" ) с сайта https://ru.dotabuff.com/players/70388657 Попробовал написать но все равно не могу получить...

Не удается запустить проект
Уважаемые форумчане, помогите пожалуйста, мучаюсь уже несколько дней, никак не могу решить проблему. Решил поставить на хостинге TimeWeb Django для изучения. Установил virtualenv, через pip установил...

Отправка письма с аттачментом
Здравствуйте, столкнулся с проблемой Traceback (most recent call last): File "C:\pyEmail\1234.py", line 27, in <module> with open(filename, "rb") as attachment: FileNotFoundError: No...

Как авторизоваться через requests
Привет всем. У меня возникла необходимость получить данные со страниц сайта iptv.live Нужная информация доступна только авторизованным пользователям. Но вот незадача. Что бы я не делал не...

Связать PHP с Python
Добрый ночи, ребята можете дать ссылки на статьи или информации где понятно объясняюсь как можно связать PHP с Python. Чтобы часть кода мог писать на php а часть на python.

Вывести текст между тегами
Здравствуйте, не могу понять, почему появляется ошибка. html = requests.get(LINK) soup = BeautifulSoup(html.text, 'html.parser') item= soup.find("div",...

Не работает авторизация через post запрос (requests)
Я пытаюсь авторизоваться на этом сайте. (хочу сделать парсер) Отправляю post запрос через requests. Через chrome смотрел 2 вещи. 1)Сам post запрос отправляется таким образом: csrfmiddlewaretoken:...

Смена цвета фона по кнопке
Здравствуйте. Хочу сделать кнопку,которая, например,будет менять цвет фона. Использую flask. P.S: В веб разработке пока что полный 0 <!DOCTYPE html> <html lang="en" dir="ltr"> <head> ...

telethon
Доброго времени суток! Безуспешно пытаюсь вызвать метод, по добавлению контакта в свой контакт лист в телеграмме: result = await client(telethon.functions.contacts.AddContactRequest( id=...

Исправить код
Формат ввода: На первой строке указаны названия учебников, разделенные символами табуляции. В начале строки идёт символ табуляции, смещающий эту строку так, чтобы она образовывала заголовок...

Парсинг на Python динамического элемента из POST запроса сайта
import requests from bs4 import BeautifulSoup songsNameList = url = f"https://top-radio.ru/web/russkij-xit" q = requests.get(url) result = q.content

Парсинг LinkedIn
Есть задача - спарсить данные пользователей, есть ссылки на их LinkedIn-профиль. Проблема в следующем - при просметре страницы при помощи функции "Просмотреть код элемента" в браузере видно...

Календарь событий
Доброго времени суток! Есть календарь событий в виде таблицы в html, первый столбец это время события, второй название события (например вынести мусор/помыть машину итд) и третий это его статус...

Запуск парсера на python каждый день
Добрый вечер! Есть проект на питоне, который парсит данные. Как можно сделать чтобы он запускался каждый день на Windows- сервере?

StaleElementReferenceException для присутствующего элемента
Добрый день. Хочу залогиниться через селениум. Открываю сайт, ввожу логин, пароль, кликаю кнопку. Проблема в том, что логин вводится нормально, а вот на поле пароль ошибка...

Повторно обратиться к запущенному браузеру selenium
Хочу авторизоваться на стороннем сайте с помощью селениум. Авторизация состоит из двух страниц логин пароль на одной и код с почты на другой def login(): if check == '1' login =...

Почему не работает перенаправление на страницу?
Реализую авторизацию на сайте без использования форм, чтобы не отправлять пароль на сервер. login.html: <!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8"> ...

Пропустить проверку на бота
Здравствуйте, делаю реквест на некий сайт resource = requests.get(URL, headers=HEADERS) Но там стоит проверка на бота, скорее всего. Выбрасывает только эту надпись <html><head><meta...

POST запросы
Всем привет, не могу понять нюанс работы с POST запросами. Например, я хочу авторизоваться на Хабре при помощи POST запроса (возьмем библиотеку Grab для примера, хотя можно и requests). При POST...

Получение ответа на ajax запрос
Не могу получить ответа к свой же аякс запрос. Запрос посылаю из отдельного файла на сервер запущенный под flask К сожалению не смотря на то что запрос я получаю, ответ, почему то, не доходит. ...

Получить имена команд и чтобы выводилось типа comand vs comand
Имеется сайт: https://game-tournaments.com/csgo не получается получить имена команд и чтобы выводилось типа comand vs comand код: import requests from bs4 import BeautifulSoup URL =...

Python FastAPI не отображается html страница
Добрый день! Подскажите, пожалуйста, почему у меня не отображается html файл, хотя всё работает без ошибок? задача заключается в том, чтобы форматировать текст, который вводит пользователь. вот код...

Создание и редактирование web содержимого на Python
Добрый день, Не знаю в какую сторону копать гранит науки, подскажите. Мне нужно, чтоб html страница на одном компьютере обрабатывала локальные мои запросы к ней с другого компьютера и изменяла...

QuerySet Django вывод данных из таблицы в произвольном порядке
Доброго времени суток! Имеется следующий код: list_iskl = list_polz = User.objects.filter(pk__in=list_iskl) но при таком исполнении, пользователи будут выводиться в порядке по возрастанию:...

Запустить скрипт на сервере подключившись через ssh
Есть файл .py хочу его запустить на сервере, на котором стоит ubuntu, подключился к нему через SSH, что делать дальше понятия не имею, дайте ссылку - почитаю или ответ

Не удаётся получить куки при авторизации через скрипт
Здравствуйте! Подскажите, пожалуйста, не вполне понимаю почему не удаётся получить куки при запросе через скрипт. После авторизации должны, по идее, быть куки, думаю, можно было бы запомнить и...

Как изменить главную страницу, где выводится It worked!?
Настроил Apache + Django и у меня выводится It worked!. Как изменить эту главную страницу? Например, вывести "Hellow world".

Как решать рекапчи v2 через антикапча?
Я делаю все по инструкциям, которые даны на антикапче, я получаю в итоге ответ, а что с ним делать дальше я понятия не имею. Никакой кнопки отправить, или чего-то подобного там нет( Вот мой код: ...

Парсинг сайта после выполнения js подгрузки?
Есть сайт, который нужно запарсить ( https://catalog.onliner.by/mobile ) . Однако он подгружает данные через js. Я использую python библиотеку requests, однако она парсит страницу до...

Почему selenium не загружает страницу полностью?
В общем пытаюсь загрузить страницу с vk mini app (https://vk.com/app7420483). Но я не могу найти элемент из окошка приложения. В чём проблема и как её решить ? Самого iframe даже нет

Парсинг CSV файла
Привет, я тут чутка джуниор, поэтому хотелось бы узнать как крутые дяди бы сделали эту задачу. Клиентская часть уже написана, интересует конкретно подсчет уникальных значений. Получается,...

Как передать данные из Select формы?
Всем привет. Я новичок в веб разработке на Python. Подскажите, пожалуйста, как передать данные из Select формы со страницы clients_manager.html в класс Lead (чтоб занести в базу данных). Ниже...

Как работать с BeautifulSoup?
Не могу понять эту конструкцию. print(soup.html.nextSibling == None) # True Полный код: doc = soup = BeautifulSoup(''.join(doc)) print(soup.html.nextSibling == None) # True # Источник...

Ошибка при попытке добавить запись, используя форму
Здравствуйте. Хочу использовать форму для добавления записей, но появляется следующая ошибка: IntegrityError at /mainpage/post/new/ ОШИБКА: нулевое значение в столбце "post_time" нарушает...

Парсинг Beautiful Soup 4 и Selenium.Webdriver
Здравствуйте, пишу парсер под сайт https://www.kimovil.com/ru/ и возникает проблема: товары динамически подгружаются. Сначала были просмотрены запросы, которые отправляет сайт для подгрузки товаров....

Как поменять местами label и input при отображении формы?
Добрый день Собственно, сабж. Изначально джанга ставит сначала label, потом input, как следствие получается лесенка из чекбоксов. Гуглил варианты, но они немного хардкорные(от написания своего...

Как распознать часть ссылки, используя регулярное выражение?
всем привет! Мне необходимо получить значение переменной code посланной посредством get запроса. URL при этом выглядит так: http://188.120.235.xxx/moneyAuth/?code=тутСодержимоеСамойПеременной ...

Как получить из div только текст?
Допустим я получаю с сайта hltv.org/matches html-код. Мне нужно получить из него время, когда будет сыгран матч, имена команд , и ссылку на этот матч. Программа получает список состоящий из <div> где...

Отказано в доступе
Я хочу получить данные с сайта https://ru.investing.com/equities/ с другими сайтами это работает, но с инвестингом-это работает иначе, мне выдаёт не тот html код. Этот сайт понимает, что запрос...

Как писать моды к World_Of_Tanks на Python?
Мужики подскажите как начать и с чего начать писать моды на python

Парсинг steam epicgames
Доброго времени суток, уважаемые коллеги! У меня есть такой вопрос, как можно получить цену на игру Стим. Есть база данных большая, где написаны просто названия игр. Я нашел один способ, по которому...

Sqlalchemy.exc.ArgumentError: Error creating backref on relationship property of that name exists on mapper
Всем привет. Столкнулся с такой проблемой. Мне надо реализовать отношение многие-ко-многим в рамках одной таблицы. Используется SQLAlchemy. Есть пара таблиц: users: id (PK) name ...

Github Что за ошибка при обновлении кода на pythonanywhere.com? Не могу исправить
(myvenv) 04:12 ~/my-first-blog (master)$ git pull Updating 83263a2..35c802a error: Your local changes to the following files would be overwritten by merge: mysite/settings.py Please,...

Selenium и "g-recaptcha-response"
Приветствую. Решаю задачу с авторизацией на сайте при помощи selenium, стоит вопрос решения каптчи. На данном этапе решил пользоваться сервисом разгадывания каптчи. Отправляю ему URL и reCAPTCHA KEY...

Удалить ссылки в html
Всем доброго времени суток! Поставлена задача: Найти на web-странице (на wiki-движке) ключевые слова и построить dot-дерево. На данный момент я считала со страницы текст при помощи библиотеки...

Спарсить таблицу из википедии
Всем доброго времени суток, сам я начинающий в python. Вопрос! На странице в тык нужно найти таблицу под названием "Highest-grossing anime films in Japan". С помощью поиска по тегам, нужно...

Простейший калькулятор в браузере
Например, вот код двух полей, куда пользователь вводит два числа. Как реализовать бэкэнд, в отдельном от этого кода файле, который будет на сервере складывать два числа и выводить на странице...

Ошибка при парсинге таблицы с сайта
Здравствуйте! Пытаюсь парсить таблицу с сайта: https://coinmarketcap.com/ Для начала хотел получить имена криптовалют из таблицы с первой страницы сайта, тут их 100. import requests from bs4...

Проблема с joblib
Здравствуйте! При попытке запустить сервер на flask получаю следующую ошибку: Traceback (most recent call last): File "app.py", line 6, in <module> from sklearn.externals import joblib...

Парсинг фотографий с их описанием из одноклассников
Можно ли спарсить фотографии с одноклассников с их описанием в оригинальном разрешении из определенного альбома? как это сделать? есть метод api photos.getPhotos но как я понял это чисто в...

При запуске через сайт не импортируется мой модуль
Здравствуйте. Взгляните свежим взглядом, у меня уже голова пухнет. Пытаюсь на локальной машине настроить Apache+mod_wsgi+Django. Итак: 1.Установил все программное обеспечение: Apache 2.4.20 ,...

Чтение файла
здравствуйте, читаю файл юзая brython, он подключен <body onload="brython()"><!--вызвать brython прямо при загрузке тела документа, активируем его при загрузке страницы--> <script...

Как узнать адрес текущей страницы?
Ну то есть засейвить его в переменную. :) Благодарю всех заранее.

Парсинг xml с глубокой вложенностью
Здравствуйте. Недавно начал осваивать Python и столкнулся с задачей распарсить файл xml с неизвестной вложенностью. Причем в результате парсинга необходимо получить массив (словарь или список) всех...

requests - Несколько запросов на сайт python
Есть кусочек кода: import requests import argparse parser = argparse.ArgumentParser(description='Test get') parser.add_argument("--ip") args = parser.parse_args() r =...

Вывод отформатированного текста из TextField в шаблон
Я зеленый в Django. Хочу сделать на сайте поле ввода текста пользователем. После чего текст сохраняем в БД. И выводим в шаблон. Проблема в том, что текст будет сплошняком храниться в моделе без...

Selenium Python выпадающий список
Добрый вечер. Столкнулся со следующей проблемой. На сайте есть курс акций. Список всех компаний хранится в выпадающем списке. Решил использовать python для того, что бы пройти по всем пунктам списка...

Бесконечный скроллинг страницы вк
Здравствуйте. Работал с vk api,пока не столкнулся с ограничением метода users.search. Даже с offset=1000 больше 1000 не получишь. Возвращает пустые словари. Скрин прилагается,кому...

Исправить ошибку в примере на джангобук ру
Собрал в кучу пример с сайта джанго, пытаюсь посмотреть результат, но при открытии страницы выдаёт ошибку <<'polls' is not a registered namespace>> помогите исправить, почему оно не зарегистрировано?...

Авторизация и куки
Всем привет. Есть сайт На сайте только цены скрыты от гостей Так я захожу with requests.Session() as session: url = 'http://www.artpolukraine.com.ua/auth/login/is_back/1' ...

Немного не понимаю bs4
напишите пожалуйста код, чтобы стянуть текст из блока через bs4 и requests <div class="child-selector"> <div class="js-child-name"> " Ваши данные: Борнашов ...

Запрос данных просто с Python и insomnia. И что потом с этими данными делать?
Вот этот сайт, https://www.codegrepper.com/, там нужныессылки - json с bs4 там делать нечего. Бесплатную прогу нарыл здесь https://insomnia.rest/download/#windows То есть это еще один способ...

Как авторизироватся на ютубе
питаюсь пройти авторизацию на ютубе вот так но ничего не происходит запрос возвращает 0 import request def loginbot(): s = request.Session() s.get("https://accounts.google.com/") ...

Selenium Перехват сообщений веб-страницы
Здравствуйте! Как с помощью selenium отслеживать сообщения открытой веб-страницы? Например, на одной из вкладок браузера открыта страница, которая периодически выдаёт различные сообщения или...

Прокси
Пишу парсер сайта. Нужно подключить прокси Использую Proxy Manager с urllib3 и BeatifulSoup. auth = make_headers(proxy_basic_auth="(мой логин):(мой пароль)") https =...

Selenium.common.exceptions.SessionNotCreatedException: Message: session not created: No matching capabilities found
Здравствуйте я пишу парсер youtube(без api), но когда я делаю запрос с помощью requests, там не выполняется javascript я решил использовать selenium и делал запрос таким образом from...

Можно ли соединить Python и PHP или JS?
Можно ли соединить Python и PHP или JS? Моя цель это создание бота на PHP или JS, я ещё ни один язык программирования из этих двух не изучал, т.к. это будет через месяц, моя цель это Ютуб, он почти...

Парсер закрытого сайта
Нужна помощь с кодом! # coding: utf-8 import requests from bs4 import BeautifulSoup from urllib.request import urlopen from urllib.parse import urljoin from lxml.html import fromstring import...

Почему requests и selenium не загружают внутренности iframe ?
Добрый день! Делаю обычный скрапинг сайта, подключаюсь как обычно (код уже работает на десятках сайтов). То, что внутри iframe, BS4 не видит. То, что вижу со стороны сайта, во вложении. ...

Работа с формами
Объясните для чего нужен следующий код. from django import forms class AddPlaceForm(forms.Form): title = forms.CharField(max_length=50) category = forms.IntegerField() Я в Python...

Как сделать так, чтобы абзацы сами добавлялись?
Вот создаю я блог, например, ну там куча статей, вставляю текст в форму добавления статьи. А оно переход на новую строку не отображает (хотя в форме добавления - все правильно). Как сделать так чтобы...

Web сервер на python
Добрый день. Есть приложение написанное на python. Хочу написать самый простой web сервер с помощью asyncio. Взял пример кода из документации: import asyncio async def test(reader,...

Мониторинг изменений сайта
Задача: отслеживать факт изменения веб-страницы типа https://www.fonbet.ru/sports/chess/ Для начала - именно факт, а не что там поменялось. Проблема: ни один готовый инструмент, который я...

Invalid leading whitespace, reserved character(s), or returncharacter(s) in header value
import requests from bs4 import BeautifulSoup from fake_useragent import UserAgent url_site = "" ua = UserAgent(verify_ssl=False) headers = {'Content-Type': 'text/html', 'accept': '*/*',...

Авторизация Python3
Помогите пожалуйста авторизоваться. Страница содержит форму авторизации: <form method="post"> <input type="hidden" name="action" value="auth"> <div style="padding-bottom: 9px; width:...

Как вставить скрипт в html-пособие?
Здравствуйте извините у меня один небольшой вопрос! А вот можно ли то, что создано в Python совместить с HTML, т.е. я создал электронное пособие с помощью HTML, и хотел бы вот вставить созданное в...

Кириллица в Python
Доброго времени суток. Помогите с проблемой. response = requests.get('http://xn--b1aaibmdhgx7gra.xn--p1ai/protect/test.txt') if response.ok: print(response.text) должен получить слово тест...

Автоматический ввод текста на сайте
День добрый. Заранее прошу извинить, если создал тему не в той категории, что нужно было, так как совсем не знаю с чего начать. Собственно вопрос: есть сайт, на нем 10 форм для ввода текста. Как...

Как сделать авторизацию пользователя перед каждым тестом?
Добрый вечер, в автоматизации новичок подскажите пожалуйста как перед каждым тестом авторизировать пользователя, токен использовать не могу, как я понял это можно реализовать с помощью фикстуры...

Генерация sitemap
Есть (уже 800) урлов их нужно объединить в sitemap.xml - проще говоря, нужна генерация sitemap.xml на python3 Карта сайта (sitemap) очень нужный файл на сервере он показывает какие страницы...

Парсинг форм ввода
Здравствуйте, всем. Пишу скрипт, который должен автоматически заполнять налоговую декларацию по доходам за пределами РФ. Большая часть скрипт уже написана. Когда нажимается “добавить источник”...

Как получить текст страницы сайта которая открывается после нажатия кнопки
Как получить текст страницы сайта которая открывается после нажатия кнопки from selenium import webdriver from selenium.webdriver.common.by import By from bs4 import BeautifulSoup import...

Selenium , снимок определенной области
Здравствуйте, только разбираюсь с библиотекой Selenum. Получаю снимок страницы, хочу обрезать нужный блок страницы, подскажите пожалуйста как это можно сделать ? не могу разобраться частью кода...

Передать параметры в базовый шаблон html
Простой Django проект в PyCharm. У меня есть базовый шаблон (base.html), который я потом расширяю в дополнительных html файлах. Мои вюшки передают в мои шаблоны некие данные, например:return...

Requests и прокси
У методов запроса из библиотеки request есть параметр proxies, который также можно задавать как свойство объекта session. Параметру нужно передать словарь из прокси-адресов вида...

Парсер: ввод английских фраз и перевод. Идеи реализации
Парсил сайт, есть несколько вопросов. Ищем цитаты, по введенному слову, получаем список цитат на английском, с переводом, добавляем в таблицу excel. Вводить можно не все слова:хороший вариант - одно...

Python+Selenium. Как управлять уже открытой веб-страницей
Эта страница требует авторизацию с помощью ЭЦП (Подписание с ЭЦП проводится посторонним приложением а не в браузере) Мне нужно получить контроль с того момента где я уже авторизован

Парсинг сайта
Добрый день. Возникла проблема с написанием рекурсивного парсинга страниц сайта. Суть такова, написан код, который парсит только страницу, которую я указал. Помогите разобраться как реализовать,...

Странная работа библиотеки wifi
Пишу на python3 web-морду для raspberry pi. На raspberry.local должны отображаться ip, температура процессора и т.д. В том числе и список видимых wi-fi сетей. Использовал библиотеку wifi Скрипт ...

Вывод результата парсинга в вебформу
Доброе время суток! Посоветуйте, пожалуйста, как лучше интегрировать python в php. Мне часто требуется такая схема: В форме на веб.странице вводятся фильтры для парсинга, эти данные нужно передать...

Error: No module named messages при установке debug_toolbar
Изначально стояла Django 1.2.5 и Python 2.6.5. После установки python-django-debug-toolbar из репозитория, версия Django сменилась на 1.1.1, а при запуске manage.py runserver или manage.py shell...

Django+gunicorn Нет доступа к соккету
Система Ubuntu 20 /etc/nginx/sites-enabled/site server { listen 80; # Тут можно вписать как точный домен, так и IP-адрес server_name 10.32.8.196;

Получение JSON от сервера, замена кавычек
Доброго времени суток. Пишу парсер и столкнулся с проблемой: Посылая запрос на сервер, получаю ответ в JSON формате, но когда забираю ответ, Python почему то меняет двойные кавычки в JSON на...

Настройки для отправки почты
Изучаю auth - создание аккаунтов, аутентификация, сброс пароля и прочее. И всё отлично, за исключением одного момента - не могу отправить сообщение. То есть, например, создание аккаунта проходит...

Парсинг картинок с nastol.com.ua
Есть скрипт который успешно парсит обои из нужных категорий, но для одной категории нужна авторизация - авторизавался, а он все равно не дает парсить с этой ссылки как быть? (ош 404) Cкрипт...

Парсинг
Доброго дня. Делаю парсинг на Python, пытаюсь сделать пагинацию на странице, но не могу понять, как вытащить номера страниц. Пожалуйста, помогите. Имеем страницы 1, 2, 3, ..., 607 <div...

Использую Селениум: как узнать адрес прокси-сервера, использованный при создании вебдрайвера?
У меня функция возвращает объект класса WebDriver. При этом я использую Хром. from selenium.webdriver import Chrome proxy-server = "94.242.58.108:1448"...

Отправка файла по электронной почте
Прога должна отправлять на имейл сообщение с файлом. А присылает Untitled.bin помогите... import zipfile from zipfile import ZipFile import os from os import path import shutil from shutil...

Не могу спарсить карточку в чем ошибка?
https://osustats.click/SkillaNet1337 - сайт который паршу(так можно выражаться?) что нужно спарсить - import requests from bs4 import BeautifulSoup as bs headers =...

Перевод кода vba на Python
нужно переписать код из vba в Python, затрудняюсь как мне вместо "Лист3.Cells(i, 2)" загнать массив и т. д. For i = 1 To n z7(i) = Лист3.Cells(i, 2) / 1000: t7(i) = Лист3.Cells(i, 3) Next i ...

Как зарегистрировать модель в админке?
Вот я написал в model.py: from django.db import models class Post(models.Model): title = models.CharField(max_length=255) datetime = models.DateTimeField(u'Дата публикации') ...

Форматирование кода в HTML
Итак. создаю сайт, своего рода банк заданий и решений, проблема в том, что решения на языке с++, а язык с++, как известно, имеет <> символы и всякие табуляции для улучшения читабельности. Есть ли...

Csrf не найден или не совпадает
проблема такова: Есть форма(заполняет пользователь) которую получаю, обрабатываю, перевожу на другую страницу. В форме есть csrf token, при обработки запроса делаю апдейт csrf и возвращаю его в...

Парсинг из сайта Gismeteo
Здравствуйте, помогите пожалуйста. Хочу спарсить, чтобы выводило температуру в Омске. Выдаёт ошибку:requests.exceptions.ConnectionError: ('Connection aborted.', RemoteDisconnected('Remote end...

Открыть URL (там ссылка, которая совершает переход на другой URL) и вытянуть новый URL
Стоит задача по одному URL получить другой Пробовал открывать URL через webbrowser, но это не совсем то, что нужно, в идеале вообще не открывать браузер, но я не представляю как и что должно...

Скрапинг html страницы
Имеется html код такого вида: <input type="hidden" name="token" value="3e2a8f3060996316d028eb1d9e85a519"> Моя задача на pythone спарсить только токен, без "" и другого кода. Я пытался это...

Парсинг сайтов с информации о телефонах
Моя проблема в том что я не знаю как сделать парсинг предмета который я ищу на сайте. В коде надо сделать переменую которая будет принимать название предмета после чего код ищет этот предмет на...

Парсер не сохраняет результат в CSV
Написал простенький парсер для сайта invest***.com, для экономического календаря. Проблема в том, что в файл сохраняется только 35 строка, а 36-ая уже игнорируется, не могу понять почему. Я что-то...

Запуск и отключение компьютера Selenium Web Driver
Добрый день. Суть в следующем: хотелось бы запускать файл питон каждый час, включая ночь. Как это представляется: компьютер в спящем режиме, в определенное время он включается и запускается...

Ожидание появления элемента
Здравствуйте, есть элемент на странице <div class="tag_name"> Занятие</div> . Раньше, я его получал с помощью html = driver.page_source soup = BeautifulSoup(html, 'html.parser') tag_name =...

Почему некоторые сайты выдают ошибку при Request
Один сайт открывает нормально, второй выдает ошибку: #encoding=utf-8 import requests url = 'https://edadeal.ru/?from=tableau_yabro' req = requests.get(url) print(req.text)...

Как парсить lazy картинки?
Не могу понять как парсить картинки, когда у них есть атрибут loading="lazy" :) вот строка: 'img_url': item.find('img', class_='product-card__hero-image') ответ такой: 'img_url':...

Парсинг и обработка данных на python
Есть такая ситуация, через апи со стороннего ресурса получаю json данные. В таком формате: { "rows": } Объектов в массиве rows может быть очень много, порядка 100 тысяч. Самих...

Почему недоступен существующий адрес?
Доброго времени суток, есть задача сделать автоматический post-запрос, ввод телефона в форму на сайте tele2 Форма открывается, если перейти по этой ссылке: https://spb.tele2.ru/ и нажать в правом...

Python: Web
здравствуйте, я в курсе, что Python: Web это Python: Flask Python: Django можно поинтересоваться, в Пичарме сообществе пишется код для них?, что имеем на выходе? я представляю, что должен быть...

Сохранить изображение с div блока
Добрый день есть html-страница вида: <div class = "up"> <img src = ""> </div> Можно ли средствами python сохранить изображение из div в указанную директорию на компьютере?

Скриншот страницы Python
Здравствуйте , подскажите пожалуйста как можно сделать скриншот страницы сайта в браузере, точнее какими библиотеками можно этого достичь ? не открывая при этом саму страницу в браузере и сам...

Python + Selenium, как переключится на окно?
Вставляю текст в input, он вставляется как комментарий (на скрине видно) Все исправляется когда в ручную кликну мышкой по нему или по полю около, до этого курсор мигает в адресной строке. Функция...

Как скачивать файлы с VK (Вконтакте)?
Спарсил список ссылок со страницы в файл, по одной ссылке на строку без скобок и запятых между ними, используя Selenium и Bs4. Они имеют такой вид без части с именем домена спереди:...

Выбор языка через select
Здравствуйте всем. Есть сайт “https://www.speechtexter.com”на нём необходимо выбрать русский язык. Я это делаю следующим образом driver.find_element_by_xpath('//*//*').click()...

Не запускается сервер
Здравствуйте Не могу запустить сервер после команды django manage.py runserver выдаёт ошибку на скриншоте

При обращении к адресу возникает ошибка "mod_python error"
Доброго времени суток! Поставил django, apache и mod_python на ubuntu server 10.04 LTS. Файлы проекта mysite лежат в /home/user/django/mysite/ Файл проекта settings.py: DEBUG = True...

Base64 декодировать изображение
В файле хранится <img alt="Как лечить подкожного клеща у собаки" class="lazy lazy-hidden size-full wp-image-3092" src="data:image/gif;base64,R0lGODlhAQABAIAAAAAAAP///yH5BAEAAAAALAAAAAABAAEAAAIBRAA7"...

Обработка AJAX запроса благодаря Python
Доброго времени суток. Есть скрипт на JS: $.ajax({ type: "GET", url: "url", data: { status: "on", i: 1 }, success: function(msg){

Получить результат запроса в виде HTML
Привет форумчанам! Необходимо в браузере выводить результат requests запроса. bla = get(url) a = bla.text Сохраняю переменную в HTML Но когда перехожу по ссылке к этому HTML, почему то не...

Peewee ManyToManyField / ManyToManyQuery
Всем привет! Есть база фильмов. В фильмах задействованы актеры. Связь many-to-many. Работаю с ORM peewee. Задача: написать функцию для добавления связи many-to-many любой модели. Имеем такие...

И опять про Error 403: Forbidden
Скачиваю иногда картинки с creativemarket.com, как образцы работ. Написал программку, чтобы руками не кликать, но уже несколько дней как всё перестало работать и получаю ошибку 403. Все...

UnboundLocalError: local variable 'driver' referenced before assignment
Здравствуйте, недавно решила начать изучать selenium, но при работе с selenium'ом у меня вылезает следующая ошибка:...

Selenium.common.exceptions.StaleElementReferenceException
Писал на форумах селениума. Но там никто не смог помочь. Осталась надежда на вас. Пишу парсер на питоне, используя селениум. Суть парсера в том, что нужно сначала повытаскивать url-адреса (их...

Как реализовать поиск в браузере ?
Имеем код который через monkeyrunner открывает нужную ссылку в браузере телефона на базе Android : #! /usr/bin/env monkeyrunner import os from com.android.monkeyrunner import MonkeyRunner,...

Сохранение сайта в pdf и image
Ряд браузеров имеет возможность сохранять содержимое посещаемых сайтов в формате pdf Также существуют конвертеры pdf to image Я хочу передавать функции url сайта и получать изображения самого...

Написал парсер текст, не выводит
Написал парсер по озону но текст не выводит помогите пожалуйста from bs4 import BeautifulSoup import requests URL =...

Как выудить необходимы данные при парсинге
Добрый день Мне необходимо спарсить данную страницу https://students.bmstu.ru/schedule/list так, чтобы после завершения работы программы, она оставляла тебе файл с названием группы (Например ИУ2-21)...

Найти причину ошибки «'str' object has no attribute 'resolve'»
http://djbook.ru/ch03.html Сделал все как по сслыке, 10 раз перепроверил, захожу на сервер и мне пишет name 'hello' is not defined, подскажите че делать то? Добавлено через 2 часа 43 минуты все...

Как выбрать элемент (чекбокс) на сайте
Я написала простенькие автоматизированные действия нажатия на кнопки сайта, однако столкнулась с такой проблемой, что при выходе всплывающего окна на одну из кнопок, он не хочет нажимать на checkbox....

Как открыть расширение браузера?
Задача: Мне нужен чтоб открыл расширение а точнее кликнули и работал с расширением. Расширение открывает новое веб окно с помощью селениума нельзя, а с чем можно? Этот фрагмент кода запускает...

Русский текст в Python
Здравствуйте! Подскажите, в какую сторону "копать". С html страницы в макрос получаю данные - текст в utf-8, который необходимо записать в текстовый файл. С английским проблем нет. Русский текст...

Перевести html в текст
Доброго времени суток, пытаюсь извлечь с сайта текст, сложность в том, что нужно использовать только стандартную библиотеку, я только новичок в пайтоне, не разбираюсь, что не так? from html.parser...

Как сделать многопоточный парсер
Я хочу сделать многопоточный парсер, но у меня просто нагружается процессор Задача моей программы в извлечении текстовой информации из сайта и запись ее в файл, урл адрес будет создаваться кусками...

Подделать User-Agent
Как подделать User-Agent при парсинге сайта? Проблема такова: Нужно обходить капчу при парсинге сайта. Я просто забираю информацию об обьекте, но если много раз переходить по ссылке, сайт...

Pythonanywhere не перезаписываются данные в файле
Создал вебхук на Flask для телеграм бота. Задача написать бота, который выдаёт ДЗ. Храню на pythonanywhere index() @app.route('/', methods=) hwork_file = open('domashka.txt', 'a') hwork_read =...

TypeError: must be str, not bytes
Здравствуйте. Решил немного улучшить свой код, но мне выдает ошибку - гуглил, но всё безуспешно. Вот сама ошибка: И вот код(в консоли показывает что ошибка на 26 и 61 строке): import os...

В selenium выбрать определённую страну из списка
Подскажите пожалуйста как в selenium выбрать определённую страну из списка. У меня не получается это сделать, попробовал написать в поле тоже не выходит. Подскажите пожалуйста, как лучше...

Парсинг подгружаемых картинок с aliexpress
Вообщем я пытаюсь достать ссылки картинок с алиэкспрес при помощи selenium, проблема возникла тогда когда понадобилась ссылка не на первую картинку товара, а на все сразу. Вот лучшее до чего я смог...

Ошибка SSL сертификатов в Selenium Webdriver
Возникла проблема при загрузке страницы, браузер выдаёт ошибку "Secure Connection Failed". Если запускать в пустом файле загрузку той же страницы, то ошибок нет. Но при работе в функции она...

Исправить код
Задача стояла такая,с while что-то пошло не так.... Напишите функцию drawHouse(t, length), в которой черепашка t рисует дом (квадрат со стороной length и равнобедренный прямоугольный треугольник со...

Как вызвать функцию из питона в html через eel
Пытаюсь вывести переменную из питона в html, и записать ее в блок, но ничего не выходит, если убираю let result = await eel.itog(x)(); и ставлю вместе result просто значение, то все работает, хелп! ...

Python в сервере. Использовать как php
Не могу найти в инете как на питоне серверную сторону писать. Нашёл только как самому сделать на питоне сервер и сравнение питона с пхп. Дайте гайд как начать на питоне серверное писать.

Хочу написать сайт
Хочу сделать онлайн библиотеку,подскажите какие программы лучше использовать и ,если можно,дайте ссылки на гайды по созданию подобного. Заранее спасибо)

Скрипт загрузки файла
Изучаю CGI. нашел такой код для загрузки файла на сервер. но вместо этого мне выскакивает табличка на сохранение пустого файла с именем скрипта. в чем дело? <html> <body> <form...

Не работает GET запрос
Добрый день! В Python делаю первые шаги. Столкнулся с трудностью. Один и тот же GET запрос с одними сайтами работает, а с другими нет. Использую такой код. Например с www.yandex.ru он отрабатывает...

Переписать java script на python
for i in { 1. .15 }; do curl - s - L - i https: //blog.taken.pl/?author=$i –user-agent “Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/51.0.2704.103...

CGI и киррилица
Здравствуйте. Столкнулся со следующей проблемой. Есть форма, из которой я беру данный и формирую анкету на другом html файле. Форма и скрипт на Python сохранены в utf-8, но кириллица отображается как...

Как оптимизировать алгоритм
Всех с наступающим! Написал дампер почты. Как он работает: 1. Логинимся на почтовом аккаунте 2. Скачиваем все письма со всех папок аккаунта, или с конкретной папки 3. Сортируем письма по...

Авторизация на сайте посредством библиотеки requests
Здравствуйте, форумчане. Использую Python 3.9. Пытаюсь авторизоваться на сайте stoshka.ru с помощью URL-запросов посредством библиотеки requests. session = requests.Session() # Получаем...

Парсинг aliexpress
У меня возникает проблема при парсинге с aliexpress на Python. Использовал requests вместе с fake_useragent. При выводе responce.text вместо кода нужной страницы выдаёт: <script> //将用户正常页面写入到...

Как сделать нормальные кнопки в телеграмм боте?
Делаю тгбота и появилась проблема, что при большом количестве кнопок клавиатура выглядит очеь некрасиво.Мне нужно, чтобы кнопки шли по одному в ряд,а не 6 в одной.Буду очень благодарен за помощь ...

FTP ошибка 550 Can't check for file existence
Написал скрипт для выкачки всех фаилов из директории на сервере. Чудеса начинают твориться тогда, когда на пути попадается фаил, который весит 0 байт. Думал обойти проблему путем ftp.size(), но не...

Не хочет работать flask_wtf
Здравствуйте. Прошу помощи. Есть код(ниже), просто через IDLE он не хочет работать, ибо не может импортировать ImportError: cannot import name 'FlaskForm'. Сначала не мог найти flask_wtf, но я скачал...

Http-post возвращает 400
Добрый вечер. Нужно передать голосовой файл и распознать текст. Использую технологию Yandex SpeechKit Cloud. https://tech.yandex.ru/speechkit/cloud/doc/dg/concepts/speechkit-dg-recogn-docpage/...

Изменить размер окна в Selenium
Не могу понять from selenium import webdriver import time driver = webdriver.Firefox() driver.manage().window().setPosition(new Point(-3000, 0)) почему New Point не распознается? как...

Как через xpath найти ссылку/текст рядом с картинкой?
http://xpather.com/JsbTCg2q Если убрать картинку - то ссылки находит, а если не убирать, то ничего нет как понял причина в том, что img не закрыт <td> <img src="https://site.com/img.png"> <a...

Вывод фрагментов из HTML документа
Здравствуйте. Столкнулся с такой ситуацией что нужно вывести из HTML документа в отдельный файл текст, но не знаю как это сделать в силу своей неграмотности в сфере программирования. Перерыв...

Парсинг таблицы с нескольких страниц
Доброго времени суток. Есть задача: с внутреннего сайта организации выгрузить таблицу. Сайт выглядет: - в начале 3 фильтра с выпадающий списком. 1 - регион, 2- город, сегмент бизнеса. - ниже...

Получаю ошибку "AttributeError: 'NoneType' object has no attribute 'get_text'" хотя в коде тег и класс указаны правильно
я работаю над парсингом сайта, использую библиотеку(BS4). ПРОБЛЕМА - мне нужно спарсить параметр с карточкой цены. как только я прописал метод(get_text), мне вылетела ошибка - AttributeError:...

Oserror errno 99 cannot assign requested address
Взял WPS на DigitalOcean, на nic.ru купил домен c SSL и указал DNS . На сервере запустил flask, и приложение начало работать в интернете, и SSl начал работать, какое-то время было всё очень хорошо,...

Селениум выбрать из всплывающего списка
Нужно выбрать опцию из всплывающего списка. Вот кусок кода driver.find_element_by_xpath(options_in_dialog_tab_xpass).click() time.sleep(1 + random.randint(0, 100) / 100) actions =...

Выполнить HTTP запрос
Ребят, необходимо выполнить на Linux скрипт на python, который бы выполнял http запрос и возвращал ответ. Подскажите пожалуйста, как это сделать? Всем плюсы в карму за помощь!

Selenium не делает скриншот
Приветствую форум, возникла проблема со скринами в Selenium. У меня такой код: from selenium import webdriver import time #driver =...

Как обработать html форму на python?
Есть html страничка <!DOCTYPE html> <html> <head> <title>Обработка форм</title> <link rel="stylesheet" href="ddddd.css"> <meta charset="utf-8"> </head> <body>

Как увеличить timeout в gunicorn?
Здравствуйте! Для запуска своего проекта использую связку gunicorn + nginx + supervisor. В файле gunicorn.conf.py прописал следующее: #!coding: utf-8 import os import multiprocessing ...

Публикация записи на стене vk
как можно опубликовать запись на стене в вк (в записи есть картинка и текст)

Selenium парсинг элементов страницы.
Как кликать на этот элемент? <div class="x-layer x-combo-list" id="ext-gen83"> <div class="x-combo-list-inner" id="ext-gen84"> <div class="x-combo-list-item x-combo-selected"> Тут текст которого...

Requests redirect
Всем привет. Автоматизирую под себя работу сайта университета. Суть скрипта состоит в том, чтобы смотреть закрыт ли предмет или нет сразу, а не прокликивать все предметы по очереди. Собрать url и...

Не получается спарсить нужные значения
Вот код который парсит данные с p2p binance.Мне нужны не все способы оплаты(payTypes).Например если я пишу "payTypes": "Tinkoff",то получается вот такая ошибка {"code":"000002","message":"illegal...

Работа с веб страницами
Как сделать, чтобы программа могла считать любое кол-во ссылок в файле и выполнить с ними эти действия? (распарсить и найти заголовки) ?? from urllib.parse import urlparse from urllib.parse...

Pandas: DataFrame to TEXT
Привет. У меня в БД (postgres) в одном из атрибутов таблицы хранятся данные типа TEXT. Есть некий csv файл, который я читаю и преобразую через pandas. Вопрос: как мне DataFrame преобразовать в TEXT...

Передача данных в POST
Вообщем написал авторегер аккаунтов ВК, но встала такая проблема, код я получаю от отправителя "VKcom", я же пытаюсь сделать от получателя MailRu, для этого регистрация должна проходить через...

Парсинг сайта РБК
Нужен сайта РБК. По функционалу: выбираем в интерфейсе поле для запроса, вводим тему(если такой нет, то вывод ошибки) и по этой теме выдать заголовки новостей по текущей дате.

Как искать следующий элемент в BeautifulSoup
Спарсил страницу в ней таблица <tbody _ngcontent-boerse-frankfurt-c136=""> <tr _ngcontent-boerse-frankfurt-c136="" class="widget-table-row"> <td _ngcontent-boerse-frankfurt-c136=""...

Парсинг
Здравствуйте, столкнулся с проблемой, когда начал парсить цены на авто. В контейнере такое число вместо цен выдает - <div class="ListingItemPrice-module__content">1&nbsp;999&nbsp;000&nbsp;₽</div> как...

Запуск exe файла на компьютере
Здравствуйте. Я написал скрипт на питоне, затем скомпилировал его в exe. На моём компьютере он отрабатывает нормально. Потом я попытался запустить файл на другом компьютере, где не установлен python...

Нужен скрипт для выгрузки прайса товара с Яндекс.Маркет в XML/YML
Нужен скрипт или модуль выгрузки прайса товара с сайта в xml/yml

Практика работы с API. Научиться разделять приложение на несколько страниц с параметрами
На основе https://gorest.co.in/ создайте блог, который состоит из 2-х видов страниц (2-х html файлов): Список статей блога, который можно получить запросом GET...

Как узнать на чем написан сайт?
Как узнать на чем написан сайт? Юзал библиотеку request? Но он не выводит, то чно нужно >>> r.headers { 'content-encoding': 'gzip', 'transfer-encoding': 'chunked', 'connection':...

Переключить город на сайте
Доброго времени суток. Подскажите как переключить город на сайте - " http://lekvapteke.ru/ " Не понимаю как реализовать. Пробовал- request, selenium, использовать куки. Ничего не помогло. ...

python код выхода из программы
Написал вроде правильно но говорит что invalid syntax и подсвечивает букву b в слове break print("пиши 0 внизу что бы выйти") # 10 line import pyowm owm =...

Изменение региона парсером python
Доброго времени суток! Хотелось бы извлечь некоторую информацию с сайта АТБ: https://www.atb.su/ При обращении проги к сайту я получаю данные для Москвы. Я могу изменить регион самостоятельно, но...

Python + requests не могу получить все куки
Доброго вечера пытаюсь получить куки, написал такой скрипт: import requests s = requests.session() r = s.get('https://google.com.ua') print(r.cookies) Запускаю, получаю всего одну куку:

Как работать с Selenium на лету?
Как работать с Selenium на лету? То есть, если во время выполнения программы увижу в браузере непредвиденный попап, то чтобы мог написать код, который надо, чтобы было возможно применить для клика по...

Библиотека Selenium
Всем доброго времени суток. Поставил библиотеку Selenium. Пытаюсь сделать так, чтобы работало через IDLE, но каждый раз выдаёт ошибку. from selenium import webdriver driver =...

find_all
Очень нужна помощь. Работаю с сайтом с помощью библиотеки BeautifulSoup. Далее использую метод find_all для получения нужных данных quotes = soup.find_all("span", class_='SearchSegment__time') Но...

Python + Selenium (скролинг)
Здравствуйте! Помогите пожалуйста! Есть задача: В данной задаче вам нужно будет снова преодолеть капчу для роботов и справиться с ужасным и огромным футером, который дизайнер всё никак не успевает...

Как присоединить swagger к django-проекту?
Всем привет. Не смог найти в гуглах, как присоединить swagger к django-проекту? Порылся на сайте swagger, то же не смог понять, где это описано... Есть небольшой django-проект (python 3), хотел...

Заголовки ответа от сервера, которые возвращает requests
Вот такие заголовки на запрос одного файла возвращает мне requests: Date=Fri, 07 Oct 2016 21:15:26 GMT Server=Apache X-Powered-By=PHP/5.4.20 Content-Disposition=attachment;...

Что к чему и просто интерфейс
Здравствуйте. Помогите, пожалуйста, разобраться. У меня python 2.7.3, хотелось бы простенький интерфейс с одним комбинированным списком, радиокнопкой и двумя полями ввода. Что нужно где скачать,...

Bs4 - не получается извлечь данные с сайта
Пытался извлечь с сайта gumtree.com инфу с объявлений, название, цену Ошибок в коде нет Мне выдает пустой ответ : C:\Users\artem\PycharmProjects\pars\venv\Scripts\python.exe...

Не могу выбрать выпадающий список Selenium
Добрый вечер. Возникла проблема при автоматизации браузера на сайте mos.ru Не могу выбрать элемент из выпадающего списка, пробовал и по значению и по видимому тексту, код в python: select =...

Xpath: Пустой текст
<tr> <td class="label"></td> <td class="value">1:3 (0:2)</td> </tr> Вот это мне надо записать с помощью локатора. Недавно начал учить их. Вот мой код: //td << Ничего не ищет....

Конвертировать html элемент в текстовое представление html
Нужно полученный элемент html - div с классом document превратить html код. То есть получить его код, записанный на странице, в виде строки. Не могу сообразить как это сделать в python - parser =...

Как заполнить раскрывающие списки
Как выбрать текстовый элемент комбинированного списка, определенный в теге div, где все теги div имеют одно и то же имя класса: <div class="x-combo-list-inner" id="ext-gen76" style="width: 1048px;...

Telegram client на pythonanywhere с использованием telethon
Пытаюсь запустить telegram client на хостинге pythonanywhere на flask Загрузил все необходимые библиотеки (см. фото1) На данном сайте создал api-приложение, получил его app_id и api_hash ...

Заполнение массива из бд
Здравствуйте. Есть модель - class Items(models.Model): name = models.CharField(max_length=15, verbose_name='Название товара', default='') price = models.IntegerField(default=0,...

Websocket client переподключение после разрыва соединения
Здравствуйте! В Python я абсолютный нуб, поэтому прошу помощи. Использую данный код для подключения по Websoket. Все работает, но по прошествии времени сервер разрывает соединение, по какой причине я...

Ошибка "TypeError: Object of type coroutine is not JSON serializable"
Имеется код: class sensorreadings(Resource): async def get(self): data = testparse.parse() print(data) return jsonify({'time': str(datetime.datetime.now()),...

Как получить элементы внутри другого элемента, используя lxml
Что-то я забыл, как с lxml работать. Вот страница: https://bankchart.kz/spravochniki/reytingi_cbr/2/2019/7 Нужно с таблицы вытаскивать каждую <div class="row">. И внутри каждого такого...

Selenium - переключиться на фрейм, который создается JS
Всем привет. Пишу небольшого бота на селениуме. Столкнулся с проблемой: через onclick событие сайт-жертва создает фрейм, с которым мне необходимо работать. Вопрос: могу ли я переключиться на...

Импортировать код Sage (Python), в HTML шаблон
Ребят, такая проблема, у меня есть HTML шаблон, и в него мне нужно импортировать простенький код Sage. Задумка была такая, чтобы там была кнопка, запускающая код Sage. Но почему то не работает,...

Selenium не находит элемент
Приветствую форум, есть следущий код: from selenium import webdriver from selenium.webdriver.common.keys import Keys search_words = input('Введите поисковый запрос: ') driver =...

Как решить проблему с установкой BeautifulSoup
привет всем подскажите как решить проблему с установкой BeautifulSoup выскакивает вот такая ошибка при установке через pip и через pycharm Collecting BeautifulSoup Using cached...

executable_path устарел (Selenium)
from selenium import webdriver import time driver = webdriver.Edge(executable_path="C:\\webdriver\\msedgedriver.exe") time.sleep(5) driver.quit() В консоли пишет: Предупреждение об...

Antigate
Приветствую форумчан! Кто может подсказать, как разгадывать re-капчи и другие посредством anti-captcha (antigate) через python?

Создание комментария vk_api
Здравствуйте, стоит задача комментировать записи вк, Но проблема: В описании метода к параметру 'message' нужно передавать 'строка, строка' Но не могу понять как это. Вот код: import vk_api...

GUI зависает при выполнении функции запущенной в отдельном потоке
Есть графический интерфейс в котором вызывается функция с бесконечным циклом. Чтоб окно программы не зависало, я отправил выполнение функции в поток. Но окно все равно зависает. Кроме того, есть...

Не работает BeautifulSoup Python
Хочу запарсить с сайта из вот этого фрагмента HTML: <td data-val="3248" style="font-size:xx-small;background:url(/m3_0_1620061447s.png) right -50px no-repeat;"><a title="Ethereum биржи - графики...

chrome.add_argument("open.defaul_directory")
Доброго дня. Ищу способ задать в настройках перед запуском дефолтную директорию открытия файлов (хочу установить свой путь). пробовал: opts.add_experimental_option("prefs",...

Посчитать слова с текста на сайте
Как посчитать слова в тексте новости на странице сайта ?

Xpath and Scraping
Вот страница http://econpy.pythonanywhere.com/ex/001.html хочу получить два списка,закупщик и цена, есть несколько вопросов, как получить все страницы, дополнив код, который я покажу и вопрос...

Функция для проверки веб страницы на код ответа сервера
Здравствуйте Всем. Прекрасно понимаю, что мой вопрос, звучит дилетантским, я ещё новичок в этой теме. Хотя сейчас слово “новичок” звучит двусмысленно. Поэтому вопрос от нуба. Как лучше...

Как парсить сайт с динамической подгрузкой через скрипты?
Сайт: https://www.soccerstand.com/ru/match/UZQNJWWl/#match-summary/match-summary Необходимо получить значения коэффициентов с этого сайта (1.73, 4.08, 4.92). Коэффициенты подгружаются динамически....

Как настроить INSTALLED_APPS и запустить manage.py?
Подскажите пожалуйста начинающему програмисту в чём ошибка. Всё делаю по самоучителю(Django разработка веб-приложений. Форсьеб Биссекс Чан), но после добавления 'ms.blog', в раздел INSTALLED_APPS...

AIOHTTP
Запускаю простенький код с использованием aiohttp. Но когда я открываю браузер, то он мне пишет, что страница не найдена. Что делать? И как можно изменить локальный хост? from aiohttp import web...

Сброс пароля суперадмина (Error: No module named tinymce)
Установлен Django 1.1.1 Для сброса пароля в консоли пытаюсь выполнить в папке проекта. python manage.py shell выдает ошибку: Error: No module named tinymce Я понимаю, что ему не хватает...

Psycopg2 как добавить кириллицу
Имеется таблица table c русскими буквами в строках и такой код: import psycopg2 ... cursor.execute('SELECT * FROM table') print(cursor.fetchall())Вывод получается такой: Как вывести...

Определите значение наибольшего элемента последовательности
Задача 2 Последовательность состоит из натуральных чисел, не превосходящих 109, и завершается числом 0. Определите значение наибольшего элемента последовательности. 1 7 9 0 вывод: 9

Передача текста в окно выбора файла используя PostMessage
При автоматизации web приложения возникла задача прикрепить файлы. Для этого в окно выбора файла нужно передать полный путь к файлу и нажать кнопку "Открыть". Решил реализовать при помощи...

Заполнение форм
Здравствуйте! Мне нужна ваша помощь. Дело в том, что мне нужно выполнить задачу в фоновом режиме, а именно: есть переменная str="String". Мне нужно ее запихать в: <textarea rows="5" cols="50"...

Парсинг меняющихся виджетов
Добрый вечер. Я новичок, и пытаюсь сделать простенький парсер сайта, на котором время от времени появляются сообщения. Пытаюсь реализовать это с помощью beautifulSoup, но он никак не хочет получать...

brython > написание расширения для хром
Хочу написать расширение для хрома на пайтон в учебных целях. Есть пример кода на JS. Как то же самое реализовать на пайтон? В частности интересует момент получения доступа к активной вкладке. //...

Обработка формы select
есть форма селект. не могу никак получить из нее выбранные значения. Суть в том чтобы вьюха получила выбранное значение - вернула html с аргументом. html <form name="doc_tip" action="/tips/"...

Как на питоне скачать файл из Интернета и запустить его?
Как на Питоне скачать файл из Интернета и запустить его? заранее благодарен!

Unused import statement 'from bs4 import BeautifulSoup'
import requests from bs4 import BeautifulSoup url = 'https://transphoto.org/' response = requests.get(url) Среда разработки pycharm, url могу подставлять любой. При запуске в консоли response...

Проверка пароля и подтверждение регистрации
def confirm_user(request): if request.method == 'POST': password = request.POST.get('check_pass', '') user = auth.authenticate(password=password) if user is not None: print("Есть...

Какая разница между библиотеками wget и requests?
Какая разница между библиотеками wget и requests?

доска объявлений
Добрый день! Нужна доска объявлений. На django. Что-то типа olx.ua/prom.ua. Сейчас пробую форумы с djangopackages и e-commerce от него же. Однако пока я въеду в англоязычную документацию,...

Как получить геоданные?
Только начал разбираться, нигде не могу найти как получать доступ к местоположению пользователя на сайте. Помогите пожалуйста)

Кодировка при открытии сохраненного файла
from selenium import webdriver driver = webdriver.Firefox() url = "http://vk.com/oldlentach" driver.get(url) driver.implicitly_wait(10) for i in range(10): ...

Добавить коментарии к блогу
привет. нет ли кого то материала-тутора как добавить коментарии к блогу. у меня есть модель блога, теперь нужно прикрутить коментарии к нему. хочу сам написать, чтоб разобраться с работой...

Убрать все html-теги из кода
есть код и мне нужно убрать все html теги например: он выводит это <td>30</td> <td><a href="https://www.khl.ru/clubs/ak_bars/" title="Ак Барс (Казань)">АКБ</a></td> <td>2</td> <td>0</td>...

Прямой IP-доступ запрещен
Здравствуйте, при подключении к сайту возвращается ответ, в котором сказано: "Direct IP access not allowed", как это исправить? Как это реализовать в библиотеке "socket"?

Создание карты и проложение кратчайшего пути
Здравствуйте.Создаю карту с районом Балашиха и хочу проложить маршрут до введенной широты и долготы. Возможно ошибка в том,что source и target не принимает значения координат. Как задать эти...

Онлайн браузерная игрушка
Доброго времени суток! В рамках изучения python решил создать небольшую браузерку, исключительно в ознакомительных целях (пока, по крайней пере =)). За сим встаал вопрос - в какую сторону следует...

Не устанавливается pip
Всем привет не могу запустить pip, после того как прописываю команду выскакивает пароль.

Из полученного списка ссылок вывести результаты только тех, которые начинаются с 24hours
Доброго времени суток. все еще пишу парсер для livinternet и поскольку границу парсинга указать я не смог (точнее смог после долгих мучений, но это не имеет смысла, так как там есть лишние...

Как сделать парсер данного сайта? уже 4 день сижу с ним
В общем проблема такая, есть сайт, авторизация на нём проходит по адресу: https://login.kundelik.kz/login После авторизации перекидывает на: https://kundelik.kz/feed Мне нужно спарсить:...

Разработка Web страницы с BD
Всем привет, у меня такой вопрос: Хочу написать программу на python, которая генерирует ссылку на web страницу. В свою очередь на web-странице находиться случайная картинка(взятая с файла), цифровая...

Как спарсить карточки героев marvel.com?
Здравстуйте Как спарсить карточки героев ? (https://www.marvel.com/characters) Не могу понять работает этот сайт

Как работать с GeoIP и сессиями?
Видел в интернете такую команду sudo gem install geoipЧто значит gem и что полезно знать о GeoIP в контексте Пайтона? Как выводить разные банеры на сайте в зависимости от места проживания посетителя...

Как получить текст с яндекс переводчика
Здравствуйте всем. Написал скрипт, который извлекает из буфера обмена и сохраняет её жёсткий диск. Потом загружает её в яндекс переводчик, и мы получаем текст на ней. Вот я не могу никак...

Парсинг сайта
Всем привет. Пытаюсь получить данные с сайта, flashscore. Конкретно нужно следующее - получить данные с главной страницы о каждом матче, например: английская лига, нужно вытащить оттуда кто с кем...

Bazel для Selenium
Для чего в описании Selenium на Github указан в разделе установки этот инструмент и для чего в контексте парсинга он может быть нужен (в уроках про него редко упоминают)?

Как сохранить сайт со всеми комплектующими?
Здравствуйте О, Мастера своего дела! Я пытаюсь автоматизировать работу пользователя на одном сайте (через Py+SE). Но, админы этого сайта объявили что завтра начнут технические работы над сайтом и...

Selenium Python взаимодействие со всплывающим окном
Добрый день! Подскажите, как взаимодействовать со всплывающим окном? При нажатии кнопки "Отмена" выскакивает окно - Alert Контекстное меню на нем не вызвать, через devtools не идентифицировать......

Перебор URL
Написать программу для перебора URL сайта построенных на числовом идентификаторе.

-2147024891, 'Access is denied.', None, None
Добрый день, ребята! Пытался гуглить, не особо помогло. Как решить проблему? Вопрос такой. Исходные данные: OS: Windows server2012 R2, IIS (сайт: C:\inetpub\wwwroot\cgi-bin) Python 3.8.2 64...

Свой сервер
здравствуйте, если в строке на Python server_address = ("", 8000) заменить на что попроще, например на server_address = ("", 8) то в адресной строке нужно как я понимаю набрать localhost:8-не...

Результат выполнения программы в консоли пропадает после выполнения скрипта
нужно отпарсить файл , но мне надо видеть что выводит сценарий , иначе мне его неотладить. Запускаю файл вот так python index.py

E-Commerce, интернет-магазин, Shop
Какие решения или CMS применяются для создания интернет - магазина? С какими платежными системами они интегрируются?

Парсер магазина
Пытаюсь разобраться с парсерами на питоне. Для практики выбрала задачу спарсить с https://shop.silpo.ua/category/374 название продукта, его цену и вес. Делаю запрос url =...

Сервер на питоне
Доброго времени суток, форумчане. Возникла тут очень интересная задача. Цель: написать онлайн-шахматы. Реализация: фронт на html + js, логика на питоне. По моей задумке ход пользователя будет...

Получить текст между тегами
Надо получить текст между тегами, которые выделены полосками <!DOCTYPE html> <html> <head> <meta charset="utf-8"> <title>CSGOBIRD.US &mdash; Home page</title> <link rel="stylesheet"...

Поиск значения переменной value в selenium
Здравствуйте всем. В BeautifulSoup смог найти нужное поле заполнения и значения переменной value. with open("output.html",encoding='UTF-8') as file: src = file.read() # print(src) ...

Но как убрать уведомления отключение расширений в режиме разработчика
Возникла необходимость написал программу для автоматического использования выбрал python, selenium При открытии браузера появляется надпись “ браузером управляет автоматическое ПО”. Ее убираю ...

Парсер твиттера. Selenium
Всем привет. Использую связку селениум + питон. Стоит задача спарсить определенные твиты, отбирая их по тексту. При выполнении возник вопрос: Как взять сам текст твита? При поиске в html странице...

Вывод данных в шаблоне
Добрый вечер. У меня есть две таблицы и связь между ними ManyToMany пытаюсь вывести в шаблоне данные из таблицы "Contexttest" Все выводит, но не хочет отображать содержимое поля "...

Какие библиотеки стоит знать в любом случае
Здравствуйте, вопрос такой: на какие django модули не идущие из коробки стоит обратить внимание ? Например бытует мнение что стандартную ОРМ в 9 из 10 случаях придется менять на sqlalchemy, может...

Создание видеохостинга наподобие YouTube
Здравствуйте. Я недавно начал изучать язык питона. Я студент. Так, я начал изучать язык питона из за того что мне универе дали задание создать видеохостинг наподобие ютуба. Чтоб на сайте были видео,...

Запрос требует указания текущего времени в unix timestamp
Добрый день! При анализе запросов на сайте ultimatetennisstatistics, в запросе указаны были следующие параметры (Смотреть во вложении) Последний параметр это текущее время в unix timestamp, но при...

Поиск элементов на странице. Selenium
Всем привет, у меня вопрос по поиску элемента на странице. Делаю что-то вроде скрипта, наверное, для покупки вещей на сайте, когда дохожу до страничку с оплатой получается ввести все данные кроме...

Чтение файла html
Здравствуйте, пытаюсь прочитать скачанный файл html, чтобы спарсить сообщения из сайта. import bs4 with open('test.html') as inf: soup = bs4.BeautifulSoup(inf.read()) Пробовал разными...

Запуск функции без нажатия кнопки
Здравствуйте. Подскажите пожалуйста. Я создал в QT Designer 3 окошка. 1 - водится значение "а" 2 - значение "b" задано заранее 3 - выводится результат сложения значения (a+b) Как сделать так...

KeyError при парсинге AJAX(json).Python 3.6.2
Всем привет, решил написать парсер на python одного сайта, где данные добавляются динамически с помощью javascript.И на раннем этапе написания появилась проблема. Пытаюсь добавить значения в список...

Ошибка при парсинге на bs4 =(
Не пойму почему при парсинге гугла он не чего не находит в перемменую desc Ниже код import requests from bs4 import BeautifulSoup as bs headers = {'accept': '*/*', 'user-agent':...

Составление multipart запроса для загрузки картинки
Пытаюсь загрузить фотку на фотострану при помощи post запроса, не получается, уже как только не изголялся, сколько бы интернета не перелазил, пытался при помощи requests и grab, ничего не выходит,...

Ошибка 403 при парсинге сайта
Я новичок, пытаюсь разобраться с парсингом, заодно решил помочь жене, она попросила вытянуть кое-какую информацию с сайта https://www.vseinstrumenti.ru/, но на мой запрос странички, всегда...

Модуль webbrowser, проблема с открытием URL в той же вкладке
Мне нужно, чтобы URL открывался в одной и той же вкладке. Как написано в документации по данному модулю (https://docs.python.org/3/library/webbrowser.html) для нужно установить параметр new = 0, но...

Авторизоваться в QIWI-кошелек post-запросом
Я вот тут подумал, можно же написать программу, которая будет чекать киви кошелек. Решил, что хочу реализовать на питоне. Порылся в интернете, научился юзать POST-запросы. Именно они мне пока что...

Переменные в SQL WEB
Категорически приветствую. Есть задача: добавлять в БД определенные переменные (То есть в VALUES (тут переменная) ) Подскажите, как можно туда запихнуть переменную? #!/usr/bin/env python3 ...

Json простой парсинг
Здравствуйте ! Есть вот такой код, возвращающий JSON: "Stock Quotes": Сам код, рабочий res = requests.get('https://www.alphavantage.co/query?function=BATCH_STOCK_QUOTES&symbols=AMD,...

Выбор фреймворка для клиент-серверного приложения
Доброго времени суток. Товарищи программисты, вопрос в выборе средств для реализации сервера. Не знаю, что лучше подойдет, поэтому надеюсь на подсказки опытных web-разработчиков. Имеется клиент на...

Как исключить из парсинга определённые столбцы HTML таблицы?
Здравствуйте. Версия Python: Python 3.7.6 Используемые модули: requests 2.23.0 beautifulsoup4 4.9.0 csv Есть множество различных HTML таблиц на сайте, в них может отличаться всё кроме...

Как обойти lazy load при парсинге страницы
Нужно спарсить со страницы несколько картинок, но они идут как background-image к блоку div и добавляются с помощью lazy load, поэтому парсер их не видит. Есть ли способ обойти эту проблему? Парсер...

Как скопировать отправленные письма в текстовый файл?
Хочу создать архив своей электронной переписки в отдельном файле. С входящими письмами получилось, но не пойму, как выйти на Отправленные письма. Кто знает, подскажите!

После чтения из базы данных при отображении дата сильно меняется
вобщем в приложении django какое работает в uwsgi скачет дата, скачет буквально, но в базу попадает правильная дата. Скажем скачет часовой пояс. причем до такой степени что можно увидеть запись с...

Установить локальный сервер или все по отдельности? (php, apache, mysql)
Извиняюсь если не в тот раздел написал просто не знал в какой лучше )) Подскажите пожалуйста!!! Какой локальный сервер подойдет для создания проектов php, python, ruby on rails на одном компьютере?

Инструкция по развертыванию рабочего окружения
Здравствуйте. Мне нужно написать сайт используя python. Я почитал в интернете, что для этого нужно использовать фреймворк. Решил использовать Django, так как о нем часто пишут/упоминают/рекомендуют. ...

Python HTTP
Всем привет! помогите мне плиз Немного модифицируйте HTTP-сервер и сделайте так, чтобы он возвращал текст, в зависимости от запроса. Например, если вы заходите на: localhost:8000/privet! То...

Асинхронный запрос SOAP
Подскажите пожалуйста как можно данный код вызвать асинхронно? from suds.client import Client url = 'https://tracking.russianpost.ru/rtm34?wsdl' client = Client(url,headers={'Content-Type':...

Стоит ли изучать парсинг? Актуальность? Востребованность?
Здравствуйте! Стоит ли учиться парсингу? На фрилансе не много объявлений (или я так искал). И кроме фриланса можно заработать этим( как дополнительное умение)? Добавлено через 7 часов 35 минут...

Парсинг залогиненной html страницы
есть код import requests from json import loads from bs4 import BeautifulSoup import re from selenium import webdriver url='https://osu.ppy.sh/beatmapsets?q=one more time' browser =...

Как к ссылке прицепить доменное имя
Здравствуйте! Проблема такая: есть сайт с новостями, и я хочу получать с него ссылки на новости. У меня есть код который получает эти ссылки. Но проблема в том, что сайт сделан на TYPO3 и все ссылки...

Установка Python на хостинг. Дайте гайд!
Добрый день! Помогите правильно начать изучать питон для web разработки. Какой хелп использовать лучше всего, с чего начать изучение?

Параллельные запросы
Здравствуйте, предположим, что мы получили пачку урлов. Как можно сделать несколько параллельных запросов, чтобы сократить время выполнения?

Не открывает https-страницы
Python 3.6.1, Selenium WebDriver, Firefox 52.0.2 Нашел пример кода, который позволяет открыть обычную http-страницу. Но мне нужно открывать https. Например, https://vk.com. Взял за основу тот код....

Русские имена файлов
Только в PHP7, насколько знаю, появилась возможность размещать файлы с русскими именами на сервере, а до этого, чтобы ссылки работали, надо было транслетирировать на латинице. Как обстоит дело с этим...

Как вывести новости по id на странице сайта?
Всем привет! Прошу помощи. Не могу понять как вывести новости (по id)? Форум проштудировал, но решение свой проблемы не нашел. Добавлено через 2 часа 33 минуты На странице base.html вот этот...

Отобразить поля для ввода в базу данных
Есть отдельная база данных на MySQL, которая подключена к django. В этой подключенной БД есть, к примеру, поле ввода e-mail'a как его отобразить и записать в БД? Вся БД сгенерированная с помощью...

Selenium PhantomJS. Прокси с авторизацией
Всем привет, столкнулся с проблемой по установке прокси для фантомжс (прокси именно с авторизацией). В инете особо инфы по этому не нашел, поэтому просьба помочь, корифеи :)

Ошибка при парсинге (no attribute 'find_all')
Доброго дня. по примеру делаю парсинг табличных данных. ранее, в примере table был с id. Теперь в коде страницы пустой table. запускаю код. выдает ощибку: trs = soup.find('div',...

Как парсить web страницу с данными которые меняются ежесекундно в онлайн режиме
Всем привет Сразу хочу извинится если такой вопрос уже был. Я на форуме новенький и поиск вышел много результатов. Но похожих я не нашёл ну или невнимательно искал. Есть такой интересный сайт ...

Прокси в Selenium (PhantomJS)
Привет всем, нуждаюсь в помощи касательно того, как задать прокси в Selenium (PhantomJS). Пробовал разные методы, найденные в интернете и stackoverflow в частности - ничего не работает. Точнее как,...

Localhost CGI 2 страницы HTML
Здравствуйте, в python3 новичок. Есть две html страницы. Первая служит для ввода логина и пароля. После нажатия кнопки отправить исполняется python3 script, который стучится на определенный сервер и...

Омофоническая замена в Python
В чем заключается шифр омофонической замены? Объясните кратко и помогите написать программу на Питоне, позволяющая текст зашифровать данным способом.

Парсинг
import argparse parser = argparse.ArgumentParser() parser.add_argument("arg", nargs="+") parser.add_argument("--sort", type=str) args = parser.parse_args() n = 0 # for i in...

Проложение маршрута
Добрый день, интересует вопрос: нужно проложить маршрут в админке с помощью карты, попытался интегрировать google_maps_django, оно отдает только поле карты на котором можно одно место обозначить. Что...

Не подключается css
Здравствуйте! Прошерстил интернет, но нигде не нашел ответа при @app.route('ver/<name>', methods=) не загружается стилевой файл из-за указания переменной в url, а если '<name>' не указывать,...

Ошибка 500 с запуском скрипта .py на хостинге
Добрый вечер. Новичек в питоне, сборка была скриптов. Залил на хостинг, не работают никак..."Ошибка 500. Внутренняя ошибка сервера" выдает. Если гружу простой скрипт: #! /usr/bin/python print...

Как добавить изображения в пост с админки?
Всем привет! Прошу совета. Стоит задача вывода данных в таком виде: Текст Картинка Текст Картинка Текст ...........

Парсинг видео тик ток
Здравствуйте, форумчане! Помогите, пожалуйста, новичку в парсинге. У меня проблема с тик током. Мне надо видос вытащить через код в питоне. Однако я столкнулся с той проблемой, что абсолютно не шарю...

Нужно открыть сайт с переменой Python
Допустим у меня есть переменная: n = input('вопрос: ') мне нужно открыть сайт в котором обсуждают этот вопрос и при возможности спарсить из него данные и вывести их в консоль пока что я нашел...

Вывод товаров категории
Есть товары и несколько категорий. Пытаюсь настроить вывод товаров принадлежащих каждой категории. urls.py from django.conf.urls import url, include from printer.views import list, item ...

Как сграббить все видео из одной группы в другую (VK)?
Есть задача: перекачать все видео с одной группы в другую простым скриптом на Python. Дело в том, что выкачивать на свой сервер видео нельзя, нужно сделать это в обход, то есть используя метод...

Запуск webbrowser в фоне
Здравствуйте! У меня такой вопрос: можно ли запустить webbrowser(стандартная библиотека import webbrowser) в фоновом режиме? А именно: url = 'http://example.com/' webbrowser.open_new_tab(url)...

Почему ответ на GET запрос из Python отличается от ответа на GET запрос из HTTP Analyzer
Добрый день. Делаю GET запрос из HTTP Analyzer Указываю только адрес запроса: https://www.nn.ru/community/sp/food/ Получаю ответ - код страницы в котором содержится следующий фрагмент: <script...

Письмо по почте
Здраствуйте import smtplib from email.mime.multipart import MIMEMultipart from email.mime.text import MIMEText fromaddr = "ббб@gmail.com" toaddr = "ааа@gmail.com" mypassword = "ссс"

Веб-сервис файлообменник
Доброго времени суток. Вот есть такая задачка: На главной странице форма загрузки файлов и поле ввода времени жизни файла. По сабмиту формы файл грузится на сервер. По истечению срока жизни файла...

Selenium+Python. Не могу добраться до раскрывающего списка
Уже 1 неделя я копаюсь в интернете про дроп даун листы пишу команду на клик по id="ext-gen21" но не получается Как открыть раскрывающий список?

Как сгенерировать html?
Печатаю следующий код: # views.py def myapps(request): return direct_to_template(request, 'test.html') # url.py url(r'^myapps$', 'views.myapps'), Но python выдаёт ошибку:

Создание примитивного веб-сервиса для парсинга
Здравствуйте. Есть задание: нужно создать веб-сервис с виде сайта. Сайт простенький - форма входа\регистрации и форма ввода ссылки для парсинга. Страница по ссылке будет парситься, и результат быдет...

Как достать необходимые данные при парсинге
Всем здравствуйте! Необходимо вытащить информацию о ценах с данного сайта ->https://ru.tradingview.com/symbols/USOIL/ . Столкнулся с проблемой,что именно на этом сайте (как мне кажется) не...

Как переопределить метод save для формы смены пароля?
Задача: переопределить метод save для формы смены пароля (PasswordResetForm), т.к. нужно использовать другой отправщик писем. пишу так: from django.contrib.auth.forms import PasswordResetForm as...

Selenium ввести повторно данные в открытом браузере
Есть локальная страница с одним инпутом и кнопкой. Ввожу текст, жму кнопку, селениум через хром открывает страницу и в инпуте на этой странице вставляет текст и жмет кнопку. На локальной странице...

Снова парсер wildberries
import requests import xlsxwriter from time import sleep def fetch(url, params): for count in range(1, 17): sleep(2) headers = params body = params

Сделать pdf на основе базы данных (Ошибка: int object has no attribute decode)
Делаю PDF на основе данных из БД. возникает ошибка 'int' object has no attribute 'decode' вью: def spisok_pdf(request, title="Список покупок", aka=""): # генерация pdf ... sp =...

Не могу авторизоваться на youtube
Здравствуйте, всем. Не могу авторизоваться на youtube. пишет небезопасное соединение. Пожалуйста как можно решить эту проблему? import json from module_for_selenium import * import os, time,...

Python requests
У меня есть код import requests url = '<url>' r = requests.get(url, data={'user': '<user>', 'password': '<password>'}) print(r.content.decode('utf-8'))

Не могу поймать куки (не кота)
Всем привет, такая проблема - пишу апи для дневника для бота вк/тг. В дневнике требуются несколько куков) - _ym_uid, _ym_d, _ym_isad, JWToken. Я обыскал весь post-запрос, в нем не было ничего, кроме...

Правильно составить запрос к базе данных
Только недавно начал изучать django, плюс к этому я не силен в sql, поэтому возможно вопрос из матчасти. Хочу выяснить для себя одну штуку, поэтому пример по сути надуманный. Я создал две модели(они...

Автоматизация создания заявки в системе учета заявок GLPI
Добрый день Коллеги, не программист, но хочу облегчить себе жизнь, прошу вас помочь в автоматизации создания заявки в системе учета заявок GLPI, может кто сталкивался и делал подобное ранее. ...

Парсер не находит элемент
Добрый день. Винда 10. Скрипт на Питоне. Пытаюсь спарсить яндекс дзен, хочу в поисковую строку автоматически добавить слово. Использую для парсинга селениум. Xpath в браузере проверил, все находит,...

Queue в multiprocessing.dummy
Всем привет, имеется следующий код: from multiprocessing.dummy import Queue, Process from selenium import webdriver def visiter(url): task = url.get() #берем ссылку из очереди ...

Selenium, как получить текст объекта по его классу?
Не могу получить текст. Класс полностью корректен, пытался и через XPath, не работает. Пишет, что не может найти элемент по указанным данным. Код: if driver.find_element(By.CLASS_NAME,...

Получение доступа к псевдоэлементу after
Здравствуйте. Вопрос следующего характера. С использованием библиотеки selenium нужно кликнуть по крестикам (изображение 1) для очищения полей с датой. На данный момент получается очищать только...

Отправить картинку загруженную с компа на html в python для обработки
У меня есть код (написанный в нотпаде), который позволяет добавить картинку с компьютера на сайт <html> <head> <title> </title> </head> <body> <form enctype="multipart/form-data"...

Авторизация в интранет сети автоматически при помощи учетки из Windows Active Directory
Добрый день. Мне нужно , что бы пользователь авторизовывался в интранет сети автоматически при помощи учетки из Windows Active Directory. Если я правильно понял , то мне нужно использовать...

Генерация html кода
Простейший случай, а я сел в лужу... #в views.py def home(request): #... return render_to_response('example/home.html', {'name': sort_li('', '', a)}) Рекурсивная функция sort_li...

Вход в аккаунт и отправка запроса!
Привет! Как можно написать программу, которая: - 1. Входит в аккаунт на сайте (никнейм, пароль); - 2. Отправляет запрос на то, что поставил оценку в профиль; - 3. Повторяет все прошедшие...

Как сделать, чтобы меню появлялось при нажатии на кнопку?
Здравствуйте. Использую bootstrap. Сделал на странице что-то похожее на это: http://twitter.github.io/bootstrap/examples/starter-template.html То есть, когда уменьшаеь окно браузера в ширину вместо...

Парсинг страницы архива тиражей «Национальная лотерея»
Помогите пожалуйста с кодом. Решил на Python спарсить страницу https://nloto.ru/lottery/digital-5x37/history. Пробовал через API сайта...

TypeError: 'str' object cannot be interpreted as an integer не понимаю почему?
Не кидайте камнями, только недавно начал изучать python, вообщем вот: import ipaddress def mask_internet(ipmask): ipnet = ipaddress.ip_network(ipmask) for ip in ipnet: ...

Python3 - регулярные выражения
Предлагаю создать тему для обсуждения - регулярные выражения. и мой, будет первым, вопрос этот код r"\w{4,5}://.+(?:png|jpg|jpeg|webp)" не получает список изображений, например, на...

Изображение на страницу
Всем доброго дня! пытаюсь вывести графики на страницу, работаю с фласком, в html шаблон добавил ссылку на изображение. но на странице оно не отображается. подскажите пожалуйста, как быть. {%...

ну что с Питоном не так?
Подключил прокси к скрипту на Питоне. Тот должен совершить определенное количество запросов к сайту и вернуть результат. Вот лог с ipLogger. Все корректно. Разные айпи - разные хедеры. При...

Парсинг XHR запросы
Доброе времени суток. Возможно ли как то спарсить все xhr запросы сайта. Т.е. не содержимое запросов, а то, куда ссылается

Parser
Добрый день, изучаю парсинг сайтов с помощью BeautifulSoup Появился вопрос: Есть следующий код, в переменную time записываю информацию с класса "timeview-info-date", содержание: <div...

Программа для вычисления интеграла методом Симпсона
помогите с написанием такой программы!

Как вывести контент плиткой?
Вот так вывожу посту в шаблоне, но к сожалению только в один, левый столбик. {% block content %} {% for post in posts %}<ul> <li> <div class="info"> <h4>{{ post.title }}</h4>...

Python + BeautifulSoup
Всем привет. Есть 2 вопроса, может кто сталкивался подскажет: 1. При парсинге сайта нужно взять текст записи. После взятия класса, нужно из этого класса взять все тэги 'p' тк именно они содержат...

Авторизация почты по imap
Как сделать авторизацию по imap (Желательно маил)?Посмотрел много тем ,но стоящего ничего не вышло.Если никак не сделать авторизацию по imap делать авторизацию по post запросу?

Открытие картинки, используя её байты
Знаю, что используя tkinter.PhotoImage можно создать картинку по её байтам: from urllib.request import urlopen from tkinter import * t = Tk() bytes = urlopen('ссылка на картинку *.gif').read()...

Авторизация пользователя
Пишет не верный логин или пароль, когда пыаюсь зайти от суперпользователя, хотя все верно Создан проект application, в нем создано приложение userstore userstore.views.py # -*- coding: utf-8 -*- ...

Выполнение скрипта по нажатию кнопки из админки
Доброго времени суток. Я только начал изучение django. Стоит задача запустить выполнение python скрипта из админки при нажатий кнопки button. Запуск команд мне удалось реализовать пока только через...

Парсер с переходом по ссылкам
Скрипт работает следующим образом: вы вводите ему URL-адрес, он просматривает на этой веб-странице количество имеющихся ссылок, следует по одной, снова просматривает эту новую веб-страницу, переходит...

Модель пользователя
Создаю приложение на джанго. Использую стандартную модель авторизации. НО: в стандартной модели пользователя весьма скудный список полей, username password email first_name last_name и некоторое...

Как переменную javascript передать в Python?
Здравствуйте. Есть 1 URL 2 Есть финансовые показатели в таблице. Например 294.13B. B это миллиарды. Это значение и нужно сохранить в переменную для дальнейших математических вычислений. 3 Если...

Как получить ссылку на медиа с сайта?
Здравствуйте. Я только начинаю программировать на Python, так что сразу простите, если спрашиваю о чём-то лёгком. Помогите пожалуйста с кодом. Нужно получать ссылку автоматически на медиа-файл с...

Спарсивает пустой span
Пытаюсь парсить данную ссылку https://steamcommunity.com/market/search?appid=730#p1_price_asc. import requests from bs4 import BeautifulSoup def get_html(url): r = requests.get(url) ...

Selenium, цикл for и итерации
Здравствуйте. Объясните, пожалуйста, почему цикл for работает только при 0 и 1 итерации. Бывает, что при запуске программы срабатывает 2 итерация, но на этом заканчивается. ...

Парсинг сайта NHL.com
Доброго времени суток, друзья! Я новичок в Python, пытаюсь распарсить сайт национальной хоккейной лиги. Пока что получилось только вынуть имена и фамилии игроков, с остальными данными беда. ...

Смена цепочки tor для парсера
я пытаюсь сделать парсер сайтов который работал бы через сеть tor вот код ua = fake_useragent.UserAgent() user = ua.random header = {'User-Agent':str(user)} proxie = { 'http':...

Не создает в базе таблицу
Всем привет! В чем проблема? Не создает таблицу article в базе, сама база создается. код # coding=utf-8 from django.db import models # Create your models here. class Article(models.Model):...

Установка модуля wget
Всем привет! Хотел установить модуль wget, но не получилось, устанавливая его через pip выдавало очень много ошибок написанных красным шрифтом. Разобрать пытался, да не смог. Есть те, кто...

Как запустить Python+PhantomJS+Selenium через прокси лист?
Доброго времени суток господа! Вообщем есть код: from selenium import webdriver browser=webdriver.PhantomJS() service_args = browser = webdriver.PhantomJS(service_args=service_args)...

Selenium хак (разобрать код)
Вообщем подглядел на http://запрещенно.site/questions/294300/is-there-a-way-to-close-a-tab-in-webdriver-or-protractor Хак ,достало закрывать открытые окна. Ток не всё понятно вот код (вроде на...

Незащищённое соединение, proxy selenium
При использовании прокси ipv4/6 с логином и паролем, что Хром, что Мазила показывает незащищённое соединение. Прокси рабочие, тип https. Но любой сайт отображает, что соединение незащищённое. В...

Парсер для сайтов
Здравствуйте, сегодня передо мной стала задача написать простенький парсер для сайта с использованием фреймворка Scrapy. Нужно проследить цену товара в 3 городах. Для этого сайт запрашивает 2...

ManyToMany в админке
Добрый день! Создал модель, одно из полей - models.ForeignKey('self', blank=True), то есть привязка к записям той же таблицы. И теперь в админке Джанго при редактировании записей появился select, в...

Отправка подписанного SOAP-запроса в rosreestr.ru
Коллеги, добрый день. Уже неделю пытаюсь отправить запрос в rosreestr. Никакого описания, никаких мануалов нет. Методом тыка дошёл до такого кода. Подскажите плиз кто нить имел дело с этим сайтом:? ...

Django vs. Flask vs. FastAPI
Какой фреймворк выбрать начинающему? Какой проще, какой сложнее? Для какого больше дополнительных пакетов на разные случаи жизни есть? У какого лучше с вакансиями?

HTML и HTTP
Мне нужна дикая помощь. Я бросил вызов всему интернету. Смогу сделать свой веб-сайт без единой платы и вносов. И есть куча проблем. 1. Нужен обработчик запросов. То есть, как принимают,...

Ошибка при редактировании профиля: AttributeError at /profile/edit/ 'ProfileEditView' object has no attribute
Добрый день, подскажите, в профиле пользователя все работает, но как переходишь на страницу редактирования профиля вылетает ошибка : Exception Type: AttributeError Exception Value: 'User'...

Парсер данных из таблиц
Только начинаю изучать питон. Хочу после некоторого времени попробовать писать реальные программы, и начну со скрипта для игры. Есть таблица со списком персонажей которые продаются.У персонажей...

A server error occurred. Ple?se contact the administrator
Начал клепать простенький блог на джанго. И тем самым обучаться данному фреймворку. Благо статей о том как начать довольно много. На домашнем компе всё работает, всё прекрасно. Решил на работе в...

Получить элемент на web-странице по клику
Пишу программку для парсера. Суть в том что она добавляет в словарь для парсера новые сайты. Юзер вводит URL страницы в мой GUI и (пока при помощи selenium) попадает на этот сайт. Далее юзер по идее...

Использование window.scrollTo
Всем привет. Как передать аргумент в скроллинг страницы? Что то вроде driver.execute_script("window.scrollTo(0, y ") Данный фрагмент не работает. Как нужно указать y ?

Get запрос
Здравствуйте! нужно выполнить get запрос вот по этому сайту(https://dt.miet.ru/sp). подскажите как это сделать? я вот так попробовал, но не получилось import requests res =...

Xpath получить в beautifulsoup
Можно ли узнать Xpath елемента с помощью beautifulsoup?

Как отобразить ползунки на странице?
Здравствуйте, форумчане) Возможно нубский вопрос, но я все же спрошу. Вообщем мне на странице надо отобразить ползунки (trackbar). скачал библиотеку trackbar v.4.0. Если просто подключать к...

Установка библиотек python на хостинге
Здравствуйте! Нужна ваша помощь. У меня есть очень простенький сайт на python (в локалке) и теперь её надо закинуть на хостинг. Проблема в том, что скрипт python использует некоторые библиотеки,...

Как отправить запрос от сервера к серверу?
Есть локальный веб-сервер, который имеет доступ в интернет. Как с него отправить запрос на другой сервер(сайт)?Обычный request хотя бы. Обычный скрипт request.get(url), а с сервера как это сделать?

Ошибка при добавлении ссылки
Помогите одолеть джангу) хочу вставить в шаблон ссылку <h4><a href="{% url 'article' article.id %}">{{ article.login }}</a></h4> вот вьюшка def show_article(request, article_id): ...

Парсинг данных из таблицы
Добрый день! Есть проблема с парсингом параметров спутников ГЛОНАСС со страницы https://www.glonass-iac.ru/glonass/ephemeris/? Раньше я парсил с помощью requests и bs4, т.к. цифры в...

При запуске manage.py выдаёт UnicodeDecodeError
При запуски команды python manage.py runserver вылазиет ошибка о кодировки, но я не знаю как и где можно это исправить. Подскажите.

Не могу скроллить страницу python+selenium
Доброе утро. Нужно прокрутить сраницу вниз. Гуглил, пробовал такие методы: ActionChains(driver).send_keys(Keys.PAGE_DOWN).perform() ...

Не делаются скриншоты в pytest
Не делаются скриншоты в pytest Подскажите в чем может быть дело. Тут либо вместо request надо что-то другое (if 'request' in item.fixturenames:) Либо что-то менять в фикстуре надо. Файл...

Многопроцессорный парсер теряет ссылки при паринге (selenium+PhantomJS+ProcessPoolExecutor)
Я хочу написать парер для некоторого вебсайта, который имеет много JS кодов. Для этого я решил выб- рать связку Selenium+PhantomJS+lxml. Работаю на Python Парсер необходим достаточно быстрый, что...

Расшифруйте предложение
Я выполнил скрипт и должен был получит некоторое сообщение, а что за сообщение я не в курсе. Я пробовал использовать encode() с utf-8 и asccii , но ни один из вариантов не подошел. Вот сообщение...

Функция возвращает старые данные
Доброго всем дня! Растолкуйте пожалуйста, в чем трабл: есть модуль, который возвращает список о текущей погоде. def weatherfunc(): data = data.append(sity) data.append(w.wind())...

Модуль request не соединяется через HTTPS прокси
Стоит задача, разработать парсер некого сайта. При частых обращениях к сайту возможен бан. Для исключения бана, обращение к сайту осуществляется через HTTPS прокси, с предварительным чеком на валид....

Python3 requests таймаут сокета
Параметр timeout в requests охватывает , как оказалось , далеко не все возможные моменты . Из-за этого часть запросов многопроцессного парсера у меня зависает на пару минут и освобождаясь с exception...

Потоки, процессы и асинхронное программирование
Добрый вечер. Почитал документацию и по моему я только еще больше запутался. Есть модуль Threadind - который подразумевает разделение программы на потоки. Т.е. задачи выполняются в параллельно...

Простой парсер
Нужно парсить коэфиценты на сайте https://csgo.band/ я нашёл простой парсер, но он почему то не рабоатет Вот мой код import requests from bs4 import BeautifulSoup as BS r =...

Навык Алисы выдает ошибку: Невалидный Json
Решил поработать с навыками для Алисы. Как Яндексы и предлагали, скачал их навык "Купи слона", установил приложение Now, изменил файл Now.json, поменяв значение "version" на два, так как на первую...

Найти сумму чётных чисел из заданного пользователем диапазона
Необходимо перебрать все целые числа в данном диапазоне (включая границы) и для всех чисел, удовлетворяющих условию отбора, посчитать величину, указанную в варианте. Например,условие отбора: x...

Эмуляция нажатия клавиатуры в Selenium
Встала задача в развороте окна браузера на 90 град для корректного снятия скриншотов. Раньше делал это руками через клавиатуру (CTRL + ALT + RIGHT). Но хочу, чтобы Chromdriver это мог делать...

Не получается получить вложенный в div элемент
Всем привет. Использую Selenium Не удаётся получить элементы внутри div. Нужно получить "Виктор" ᐁ <div class="kf-eukP-3c459 ᐅ <span class="kf-eukO-08056 kf-eukx-f2f8d">...</span> ᐁ...