|
|
Другие темы раздела | |
Python Requests login session
https://www.cyberforum.ru/ python-web/ thread1945031.html Пытаюсь авторизоваться через requests на сайте http://www.mdpi.com/ и оставаясь авторизованным спарсить его через (email авторов доступны только авторизированным пользователям). Задуманное не удается, не понимаю собственно почему, буду рад любому вкладу или толчку в нужном направлении. Собственно код: import requests from bs4 import BeautifulSoup import traceback |
Парсинг форума через BeautifulSoup - Python Python Самостоятельно занимаюсь изучением языка Python. Решил написать примитивный парсер сайта, используя библиотеку BeautifulSoup это код из видеоурока, чуть чуть подправил его под другой сайт. Хочу получить название игр с 4pda.ru/forum/index.php?showforum=519 import urllib.request from bs4 import BeautifulSoup def get_html(url): responce = urllib.request.urlopen(url) |
Python Ошибка кодировки при чтении из файла
https://www.cyberforum.ru/ python-web/ thread1943423.html При попытке выборки данных по определенным тегам из сохраненного файла при помощи BeautifulSoup, появляется сообщение UnicodeDecodeError: 'charmap' codec can't decode byte 0x98 in position 22072: character maps to <undefined> Причем какой сайт я бы не парсил, ошибка именно по 0x98 Вот мой код: import requests, bs4 #Downloading web page |
Python Цикл for, Page not found (404)
https://www.cyberforum.ru/ python-web/ thread1942619.html Здравствуйте. Есть два models - class Category(models.Model): name = models.CharField(max_length=255, verbose_name='Название категории', default='') alias = models.SlugField(verbose_name='Alias категории', default='') image = models.ImageField(null=True, blank=True, upload_to='image/', verbose_name='Изображение') class Meta: verbose_name = "Категория" ... |
Robobrowser или mechanize? Python Здравствуйте Что посоветуете использовать для клика по кнопкам на сайте, заполнение полей,авторизации. Хочу попробовать написать бота для браузерной игры. Только пожалуйста не советуйте Selenium. Он слишком тяжелый и хочется всё делать без открытия браузера. Посоветуйте библиотеки подобного рода кто пользовался. |
Python Вызов функции из модуля в функции класса тестов Доброго времени суток! Я новичок. У меня закипает мозг и я не могу понять, почему так. у меня есть два файла: settings.py and QAT.py settings.py -- я просто складываю все переменные и функции.... QAT.py https://www.cyberforum.ru/ python-web/ thread1940598.html |
Python Перевести Python в php
https://www.cyberforum.ru/ python-web/ thread1940567.html Добрый день. Есть код на питоне, его нужно перевести в php или curl даже лучше. Правда код только в pdf-файле из которого не копируются отступы, а для питона, как я понял то важно. Сможет кто-то помочь? |
Python Непонятный символ с кавычками при urlopen (b'') Здравствуйте! Делаю на локальный сайт запрос, и вывожу там сообщение на странице, а в командной строке к результату добавляется b 'Тут То что Выводилось в Браузере' Вот код: getCommand = {'mac': obj1.getMac(),'target':'getCommand'} coded_getCommand = urllib.parse.urlencode(getCommand) query_server = urllib.request.urlopen(u'http://test2.ru/check.php', coded_getCommand.encode('utf-8'))... |
Python FTP ошибка 550 Can't check for file existence Написал скрипт для выкачки всех фаилов из директории на сервере. Чудеса начинают твориться тогда, когда на пути попадается фаил, который весит 0 байт. Думал обойти проблему путем ftp.size(), но не получилось. Самая мистика заключается в том, что фаил не хочет скачиваться именно с этой директории. Поднимаю его выше (сохраняя права доступа) - все работает. В квадратных скобках на выводе... https://www.cyberforum.ru/ python-web/ thread1935828.html |
Python Получить изображение из email'a
https://www.cyberforum.ru/ python-web/ thread1935153.html Привет ребята, начал изучать пайтон и сразу взялся за проектик для коллеги, короче есть малина(Raspberry Pi) которая подключается к цифровой рамке через HDMI, и нужно чтобы малина с каким-то определенным интервалом проверяла имейл пользователя на наличие сообщение с прикрепленными изображениями и выводила это добро на экран цифровой рамки, С малиной работать буду позже, хочу для начала... |
Python Ajax переход на следующую страницу Доброго времени суток. Не могу разобраться с ajax запросами. На сайте каталог товаров прогружается после нажатия кнопки "Показать еще". Пытался отправить данные формы или просто менять ссылку (подставлять другой номер страницы). Но ничего не выходит. Ниже код который выводит 50 ссылок на товар. В выбранной категории их чуть более 700. import requests from bs4 import BeautifulSoup |
Python Как вытащить кол-во подписчиков пользователя на сайт?
https://www.cyberforum.ru/ python-web/ thread1934067.html На сайт нужно вытащить кол-во подписчиков инстаграм и вк пользователя, для рассчета скидки. Возможно ли это сделать без API? И как? Спасибо. |
0 / 0 / 0
Регистрация: 24.03.2017
Сообщений: 6
|
|
26.03.2017, 14:45 [ТС] | 0 |
Не создается файл с данными при парсинге сайта - Python - Ответ 1025905326.03.2017, 14:45. Показов 1687. Ответов 8
Метки (Все метки)
Ответ
Не думаю что дело в исключениях, скорее всего у меня проблема с кодировкой, потому что если в место .text.strip() cnfdk. encode('utf-8').strip() то все начинает работать и файл создается, таблица формируется. выглядит так:
Вернуться к обсуждению: Не создается файл с данными при парсинге сайта Python
0
|
26.03.2017, 14:45 | |
Готовые ответы и решения:
8
При парсинге сайта содержание в строке выводится не на языке сайта Не создается файл с данными Ошибка при парсинге сайта Ошибка при парсинге сайта |
26.03.2017, 14:45 | |
26.03.2017, 14:45 | |
Помогаю со студенческими работами здесь
0
При нажатии на кнопку файл не создается на диске, а он создается только после сворачивания или закрытия окна... Ошибка при парсинге таблицы с сайта Проблема тегами при парсинге сайта Получение url при парсинге сайта Ошибка 403 при парсинге сайта Неправильная кодировка при парсинге сайта |