С Новым годом! Форум программистов, компьютерный форум, киберфорум
Python: Web
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.50/4: Рейтинг темы: голосов - 4, средняя оценка - 4.50
1 / 1 / 0
Регистрация: 17.08.2017
Сообщений: 142

Подскажите , как оптимизировать код парсера

25.01.2020, 01:51. Показов 870. Ответов 4
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Что прочитать ,чтобы оптимизировать .... это)
Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
import requests
from bs4 import BeautifulSoup
 
 
def html(url):
    page = requests.get(url)
    page.encoding = 'UTF-8'
    return page.text
 
 
def code(page):
    file = BeautifulSoup(page, 'lxml')
    news = file.find(class_="content-block", id="news").find_all('a')
    Tuple = file.find(class_="content-block", id="news").find_all('div', class_="teaser")
 
    heads = []
    tut = ['']
    f = 0
 
    for i in Tuple:  # Описание
        if i.string:  # Только если i это текст
            tut.append(i.string.strip())
    for i in news:  # Заголовки статей и ссылки на них
        if i.string:  # Только если i это текст
            f += 1  # № новости
            ss = 'https://3dnews.ru/' + i.get('href')
            heads.append({'text': i.string.strip(),
                          'ss': ss,
                          'f': f})
 
    return heads, tut
САЙТ для парсинга: https://3dnews.ru/

Прошу совет , не лекцию( стараюсь учиться на практике)
0
Programming
Эксперт
39485 / 9562 / 3019
Регистрация: 12.04.2006
Сообщений: 41,671
Блог
25.01.2020, 01:51
Ответы с готовыми решениями:

Подскажите пожалуйста, как оптимизировать код
Я в данный момент учусь самостоятельно Python. Новичок. Поэтому и вопрос наверняка глупейший. Но в процессе обучения без этого никуда. ...

Как можно оптимизировать код? Код считывает кол-во скобок
s = input() s = cheked = set() ans = 0 L = len(s) for l in range(L+1 if L % 2 else L, 1, -2): for i in range(L-l+1): ...

Как можно максимально оптимизировать данный код через логическое индексирование? Код полностью работает
header = data = , , , , , , , , , , , , ] import numpy as np def salary_info_purchased(data, gender=None, purchased=None): ...

4
Просто Лис
Эксперт Python
 Аватар для Рыжий Лис
5972 / 3734 / 1099
Регистрация: 17.05.2012
Сообщений: 10,791
Записей в блоге: 9
25.01.2020, 08:54
https://3dnews.ru/cpu/rss/
1
1 / 1 / 0
Регистрация: 17.08.2017
Сообщений: 142
25.01.2020, 13:20  [ТС]
Можете пояснить для новичка . Не очень понимаю зачем нам xml ,если есть html.
0
 Аватар для m0nte-cr1st0
1043 / 578 / 242
Регистрация: 15.01.2019
Сообщений: 2,178
Записей в блоге: 1
25.01.2020, 22:04
David099, посмотри, сколько ненужного шлака в исходном хтмл коде.
1
1 / 1 / 0
Регистрация: 17.08.2017
Сообщений: 142
25.01.2020, 23:34  [ТС]
А понял , спасибо . А нет простого способа понять ,какая часть кода нам нужна (вместо того что-бы верть с html кодом) ?
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
inter-admin
Эксперт
29715 / 6470 / 2152
Регистрация: 06.03.2009
Сообщений: 28,500
Блог
25.01.2020, 23:34
Помогаю со студенческими работами здесь

Подскажите как оптимизировать код?
Не сильно разбираюсь в циклах,по этому вот такой аут вышел. ID_NomerPari идет от 1 до 7

Подскажите как оптимизировать код?
Привет Как оптимизировать количество методов, чтоб не плодить их из за полей, которым присвоены разные значения и используются в этих...

подскажите, как оптимизировать код
Всем привет, js только начал изучать, но стоит вопрос..как не городить кучу кода, и оптимизировать данное...понимаю, что надо создать...

Подскажите как оптимизировать код
//1. Имеется массив из 10 элементов. Необходимо: //- найти среднее арифметическое всех элементов массива //- посчитать сумму...

Подскажите как оптимизировать код
Добрый день. Подскажите пожалуйста, как можно оптимизировать код? Может с помощью JIT компилятора ? Но как это сделать? В инете не...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
5
Ответ Создать тему
Новые блоги и статьи
Изучаю kubernetes
lagorue 13.01.2026
А пригодятся-ли мне знания kubernetes в России?
Сукцессия микоризы: основная теория в виде двух уравнений.
anaschu 11.01.2026
https:/ / rutube. ru/ video/ 7a537f578d808e67a3c6fd818a44a5c4/
WordPad для Windows 11
Jel 10.01.2026
WordPad для Windows 11 — это приложение, которое восстанавливает классический текстовый редактор WordPad в операционной системе Windows 11. После того как Microsoft исключила WordPad из. . .
Classic Notepad for Windows 11
Jel 10.01.2026
Old Classic Notepad for Windows 11 Приложение для Windows 11, позволяющее пользователям вернуть классическую версию текстового редактора «Блокнот» из Windows 10. Программа предоставляет более. . .
Почему дизайн решает?
Neotwalker 09.01.2026
В современном мире, где конкуренция за внимание потребителя достигла пика, дизайн становится мощным инструментом для успеха бренда. Это не просто красивый внешний вид продукта или сайта — это. . .
Модель микоризы: классовый агентный подход 3
anaschu 06.01.2026
aa0a7f55b50dd51c5ec569d2d10c54f6/ O1rJuneU_ls https:/ / vkvideo. ru/ video-115721503_456239114
Owen Logic: О недопустимости использования связки «аналоговый ПИД» + RegKZR
ФедосеевПавел 06.01.2026
Owen Logic: О недопустимости использования связки «аналоговый ПИД» + RegKZR ВВЕДЕНИЕ Введу сокращения: аналоговый ПИД — ПИД регулятор с управляющим выходом в виде числа в диапазоне от 0% до. . .
Модель микоризы: классовый агентный подход 2
anaschu 06.01.2026
репозиторий https:/ / github. com/ shumilovas/ fungi ветка по-частям. коммит Create переделка под биомассу. txt вход sc, но sm считается внутри мицелия. кстати, обьем тоже должен там считаться. . . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru