Форум программистов, компьютерный форум, киберфорум
Python: Web
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
 Аватар для IRIP
514 / 146 / 28
Регистрация: 18.04.2015
Сообщений: 1,904
Записей в блоге: 16

Ответ.mail.ru parser

27.09.2018, 18:01. Показов 1534. Ответов 0
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
question.py

Python
1
2
3
4
5
6
7
8
9
10
class Question:
    def __init__(self, qid, uid, title, desc):
        self.qid = qid
        self.uid = uid
        self.name = title
        self.desc = desc
        self.answers = []
 
    def __str__(self):
        return 'Question ID: {}\nUser ID: {}\nName: {}\nDescription: {}\nAnswers: {}\n'.format(self.qid, self.uid, self.name, self.desc, self.answers)

***************.py

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
import requests, json, csv
from bs4 import BeautifulSoup
from answer import Answer
from question import Question
 
url = 'https://***************/api/v2/question?ajax_id=0&qid={}&sort=1&n=20&p=0'
count = int(
    BeautifulSoup(requests.get('https://***************/open/').content, 'html.parser').find('div',
                                                                                           class_='gray-l dotted item item_ava item_similiar').find_all(
        'a')[1]['href'].split('/')[2])
i = count - 1000000
j = 1
 
page = json.loads(requests.get(url.format(i)).text)
with open('answers.csv', 'w+', encoding='utf-8') as f:
    writer = csv.writer(f, delimiter=';', quotechar='|', quoting=csv.QUOTE_MINIMAL)
    writer.writerow(['Question ID', 'User ID', 'Question', 'Description', 'Answerer ID', 'Answer'])
    while j < 1000000:
        if 'error' not in page:
            title = page['qtext']
            try:
                desc = page['qcomment']
            except AttributeError:
                desc = ''
            question = Question(page['qid'], page['usrid'], title, desc)
            if 'answers' in page:
                for answer in page['answers']:
                    toAppend = Answer(answer['usrid'], answer['atext'])
                    question.answers.append(toAppend)
                    print(question)
                    writer.writerow([question.qid, question.uid, question.name.replace(';', ',').replace('\n', ' '),
                                     question.desc.replace(';', ',').replace('\n', ' '), toAppend.uid,
                                     toAppend.text.replace(';', ',').replace('\n', ' ')])
            print(j)
            j += 1
        i += 1
        page = json.loads(requests.get(url.format(i)).text)

answer.py

Python
1
2
3
4
5
6
7
class Answer:
    def __init__(self, uid, text):
        self.uid = uid
        self.text = text
 
    def __repr__(self):
        return '{} {}'.format(self.uid, self.text)
источник:
0
Programming
Эксперт
39485 / 9562 / 3019
Регистрация: 12.04.2006
Сообщений: 41,671
Блог
27.09.2018, 18:01
Ответы с готовыми решениями:

Parser
Добрый день, изучаю парсинг сайтов с помощью BeautifulSoup Появился вопрос: Есть следующий код, в переменную time записываю информацию...

С клавиатуры вводится трёхзначное число. Нужно вывести ответ «Да», если все его цифры четные, и ответ «Нет» в остальных
С клавиатуры вводится трёхзначное число. Нужно вывести ответ «Да», если все его цифры четные, и ответ «Нет» в остальных случаях.

parser
Написал такой код для парсера я не слишком шарю в этой теме но что то тут явно не так, так как ни в пейчарме не выводит ответ ни в каких...

0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
inter-admin
Эксперт
29715 / 6470 / 2152
Регистрация: 06.03.2009
Сообщений: 28,500
Блог
27.09.2018, 18:01
Помогаю со студенческими работами здесь

Parser Python
import requests from bs4 import BeautifulSoup as BS page = 1 while True: r =...

Выборка из списка Parser()[][]
Здравствуйте вопрос скорее всего школьный будет, только изучаю Python - по книге Пол бэрри, там сразу боевые задачи даются. Может...

Parser Http страницы
Здравствуйте, как распарсить http в html? Знаю что это возможно но не понимаю как. В инете находил готовые варианты, но там ничего не...

s_push parser stack overflow
Приветствую! Есть следующий код: print...

BeautifulSoup parser Python ( одинаковые атрибуты )
Подскажите пожалуйста - что делать если классы\id одинаковые во многих блоках, но данные содержащиеся в них разные.. Как достать к...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
1
Ответ Создать тему
Новые блоги и статьи
Krabik - рыболовный бот для WoW 3.3.5a
AmbA 21.03.2026
без регистрации и смс. Это не торговля, приложение не содержит рекламы. Выполняет свою непосредственную задачу - автоматизацию рыбалки в WoW - и ничего более. Однако если админы будут против -. . .
Программный отбор значения справочника
Maks 21.03.2026
Процедура ВодителиНачалоВыбора(Элемент, ДанныеВыбора, ВыборДобавлением, СтандартнаяОбработка) / / Отключаем стандартную обработку (стандартное открытие формы выбора без фильтров) . . .
Переходник USB-CAN-GPIO
Eddy_Em 20.03.2026
Достаточно давно на работе возникла необходимость в переходнике CAN-USB с гальваноразвязкой, оный и был разработан. Однако, все меня терзала совесть, что аж 48-ногий МК используется так тупо: просто. . .
Оттенки серого
Argus19 18.03.2026
Оттенки серого Нашёл в интернете 3 прекрасных модуля: Модуль класса открытия диалога открытия/ сохранения файла на Win32 API; Модуль класса быстрого перекодирования цветного изображения в оттенки. . .
SDL3 для Desktop (MinGW): Рисуем цветные прямоугольники с помощью рисовальщика SDL3 на Си и C++
8Observer8 17.03.2026
Содержание блога Финальные проекты на Си и на C++: finish-rectangles-sdl3-c. zip finish-rectangles-sdl3-cpp. zip
Символические и жёсткие ссылки в Linux.
algri14 15.03.2026
Существует два типа ссылок — символические и жёсткие. Ссылка в Linux — это запись в каталоге, которая может указывать либо на inode «файла-ИСТОЧНИКА», тогда это будет «жёсткая ссылка» (hard link),. . .
[Owen Logic] Поддержание уровня воды в резервуаре количеством включённых насосов: моделирование и выбор регулятора
ФедосеевПавел 14.03.2026
Поддержание уровня воды в резервуаре количеством включённых насосов: моделирование и выбор регулятора ВВЕДЕНИЕ Выполняя задание на управление насосной группой заполнения резервуара,. . .
делаю науч статью по влиянию грибов на сукцессию
anaschu 13.03.2026
прикрепляю статью
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru