Подскажите , как оптимизировать код парсера

@David099 · Регистрация: 17.08.2017

Студворк — интернет-сервис помощи студентам

Что прочитать ,чтобы оптимизировать .... это)

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
import requests
from bs4 import BeautifulSoup
 
 
def html(url):
    page = requests.get(url)
    page.encoding = 'UTF-8'
    return page.text
 
 
def code(page):
    file = BeautifulSoup(page, 'lxml')
    news = file.find(class_="content-block", id="news").find_all('a')
    Tuple = file.find(class_="content-block", id="news").find_all('div', class_="teaser")
 
    heads = []
    tut = ['']
    f = 0
 
    for i in Tuple:  # Описание
        if i.string:  # Только если i это текст
            tut.append(i.string.strip())
    for i in news:  # Заголовки статей и ссылки на них
        if i.string:  # Только если i это текст
            f += 1  # № новости
            ss = 'https://3dnews.ru/' + i.get('href')
            heads.append({'text': i.string.strip(),
                          'ss': ss,
                          'f': f})
 
    return heads, tut

САЙТ для парсинга: https://3dnews.ru/

Прошу совет , не лекцию( стараюсь учиться на практике)

Рыжий Лис · 25.01.2020, 08:54

https://3dnews.ru/cpu/rss/

@David099 · 25.01.2020, 13:20 **[ТС]**

Можете пояснить для новичка . Не очень понимаю зачем нам xml ,если есть html.

@m0nte-cr1st0 · 25.01.2020, 22:04

David099, посмотри, сколько ненужного шлака в исходном хтмл коде.

@David099 · 25.01.2020, 23:34 **[ТС]**

А понял , спасибо . А нет простого способа понять ,какая часть кода нам нужна (вместо того что-бы верть с html кодом) ?

Новые блоги и статьи Все статьи Все блоги /
Очистка реквизитов документа при копировании Maks 09.04.2026 Алгоритм из решения ниже применим как для типовых, так и для нетиповых документов на самых различных конфигурациях. Задача: при копировании документа очищать определенные реквизиты и табличную. . .	модель ЗдравоСохранения 8. Подготовка к разному выполнению заданий anaschu 08.04.2026 https:/ / github. com/ shumilovas/ med2. git main ветка * содержимое блока дэлэй из старой модели теперь внутри зайца новой модели 8ATzM_2aurI	Блокировка документа от изменений, если он открыт у другого пользователя Maks 08.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа, разработанного в конфигурации КА2. Задача: запретить редактирование документа, если он открыт у другого пользователя. / / . . .	Система безопасности+живучести для сервера-слоя интернета (сети). Двойная привязка. Hrethgir 08.04.2026 Далее были размышления о системе безопасности. Сообщения с наклонным текстом - мои. А как нам будет можно проверить, что ссылка наша, а не подделана хулиганами, которая выбросит на другую ветку и. . .
Модель ЗдрввоСохранения 7: больше работников, больше ресурсов. anaschu 08.04.2026 работников и заданий может быть сколько угодно, но настроено всё так, что используется пока что только 20% kYBz3eJf3jQ	Дальние перспективы сервера - слоя сети с космологическим дизайном интефейса карты и логики. Hrethgir 07.04.2026 Дальнейшее ближайшее планирование вывело к размышлениям над дальними перспективами. И вот тут может быть даже будут нужны оценки специалистов, так как в дальних перспективах всё может очень сильно. . .	Горе от ума kumehtar 07.04.2026 Эта мне ментальная установка, что вот прямо сейчас, мол, мне для полного счастья не хватает (нужное вписать), и когда я этого достигну - тогда и полный кайф. Одна из самых сильных ловушек на пути. . . .	Использование значений реквизитов справочника в документе, с определенными условиями и правами Maks 07.04.2026 1. Контроль срока действия договора Алгоритм из решения ниже реализован на примере нетипового документа "ЗаявкаНаРаботу", разработанного в конфигурации КА2. Задача: уведомлять пользователя, если. . .

Рыжий Лис Просто Лис 5973 / 3735 / 1099 Регистрация: 17.05.2012 Сообщений: 10,791 Записей в блоге: 9
	25.01.2020, 08:54
	https://3dnews.ru/cpu/rss/ 1

@David099 1 / 1 / 0 Регистрация: 17.08.2017 Сообщений: 142
	25.01.2020, 13:20 [ТС]
	Можете пояснить для новичка . Не очень понимаю зачем нам xml ,если есть html. 0

@m0nte-cr1st0 1043 / 578 / 242 Регистрация: 15.01.2019 Сообщений: 2,178 Записей в блоге: 1
	25.01.2020, 22:04
	David099, посмотри, сколько ненужного шлака в исходном хтмл коде. 1

@David099 1 / 1 / 0 Регистрация: 17.08.2017 Сообщений: 142
	25.01.2020, 23:34 [ТС]
	А понял , спасибо . А нет простого способа понять ,какая часть кода нам нужна (вместо того что-бы верть с html кодом) ? 0