Посчитать количество тегов на странице сайта

@Sonico · Регистрация: 14.10.2016

Студворк — интернет-сервис помощи студентам

Как можно быстро и удобно посчитать количество тегов на странице сайта(как всех вообще, так и каждый вид тега по отдельности)? А вообще нужно найти частоту их появы на сайте. При чем у меня почему-то не подключается библиотека requests, приходится работать с urllib.request

@Kifsif · 23.04.2017, 15:09

Так пойдет?

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
from xml.dom.minidom import parseString
 
html = """<html>
    <head>
        <title>Some Text</title>
    </head>
    <body>
        <p>Hello World</p>
        <p>Counting Elements is easy with DOM</p>
    </body>
</html>
"""
 
parsed_xml = parseString(html)
 
tags = parsed_xml.getElementsByTagName('*')
p_tags = parsed_xml.getElementsByTagName("p")
 
print (tags)
print(len(tags))
print (p_tags)
print(len(p_tags))

В общем, достать страницу, переконвертить в xml. Проблема в том, что если в xml удастся переконвертить из-за кривого html, то тут проблема.

Jabbson · 23.04.2017, 17:52

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
import requests
from lxml import html
from collections import Counter
 
url = 'https://www.cyberforum.ru/python-web/thread1966556.html'
page = requests.get(url)
tree = html.fromstring(page.content)
 
all_elms = tree.cssselect('*')
all_tags = [x.tag for x in all_elms]
 
c = Counter(all_tags)
 
# print('all:', len(all_elms), 'span:', c['span'])
 
for e in c:
    print('{}: {}'.format(e, c[e]))

@Sonico · 23.04.2017, 18:56 **[ТС]**

Я смог подключить requests и пытался достать сайт несколькими способами:

Python
1
2
3
import urllib.request
response = urllib.request.urlopen('https://httpbin.org/get')
print(response.read())

Python
1
2
3
import requests
response = requests.get('https://httpbin.org/get')
print(response.content)

Python
1
2
3
import requests
response = requests.get('https://httpbin.org/get')
print(response.text)

и конвертировал в строку, но когда подставлял сюда parsed_xml = parseString(html), оно пишет,что синтаксическая ошибка. Засунул я все в свою переменную и ее уже и подставлял в parseString()

Добавлено через 38 минут
Jabbson, вроде все норм спасибо большое.

Новые блоги и статьи Все статьи Все блоги /
влияние грибов на сукцессию anaschu 26.01.2026 Бифуркационные изменения массы гриба происходят тогда, когда мы уменьшаем массу компоста в 10 раз, а скорость прироста биомассы уменьшаем в три раза. Скорость прироста биомассы может уменьшаться за. . .	Воспроизведение звукового файла с помощью SDL3_mixer при касании экрана Android 8Observer8 26.01.2026 Содержание блога SDL3_mixer - это библиотека я для воспроизведения аудио. В отличие от инструкции по добавлению текста код по проигрыванию звука уже содержится в шаблоне примера. Нужно только. . .	Установка Android SDK, NDK, JDK, CMake и т.д. 8Observer8 25.01.2026 Содержание блога Перейдите по ссылке: https:/ / developer. android. com/ studio и в самом низу страницы кликните по архиву "commandlinetools-win-xxxxxx_latest. zip" Извлеките архив и вы увидите. . .	Вывод текста со шрифтом TTF на Android с помощью библиотеки SDL3_ttf 8Observer8 25.01.2026 Содержание блога Если у вас не установлены Android SDK, NDK, JDK, и т. д. то сделайте это по следующей инструкции: Установка Android SDK, NDK, JDK, CMake и т. д. Сборка примера Скачайте. . .
Использование SDL3-callbacks вместо функции main() на Android, Desktop и WebAssembly 8Observer8 24.01.2026 Содержание блога Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .	моя боль iceja 24.01.2026 Выложила интерполяцию кубическими сплайнами www. iceja. net REST сервисы временно не работают, только через Web. Написала за 56 рабочих часов этот сайт с нуля. При помощи perplexity. ai PRO , при. . .	Модель сукцессии микоризы anaschu 24.01.2026 Решили писать научную статью с неким РОманом	http://iceja.net/ математические сервисы iceja 20.01.2026 Обновила свой сайт http:/ / iceja. net/ , приделала Fast Fourier Transform экстраполяцию сигналов. Однако предсказывает далеко не каждый сигнал (см ограничения http:/ / iceja. net/ fourier/ docs ). Также. . .

@Sonico 1 / 1 / 0 Регистрация: 14.10.2016 Сообщений: 67

	Посчитать количество тегов на странице сайта 23.04.2017, 12:38. Показов 14969. Ответов 3 Метки нет (Все метки) Как можно быстро и удобно посчитать количество тегов на странице сайта(как всех вообще, так и каждый вид тега по отдельности)? А вообще нужно найти частоту их появы на сайте. При чем у меня почему-то не подключается библиотека requests, приходится работать с urllib.request 0

Посчитать количество тегов на странице сайта

Решение