Парсер html, вытащить текст класса

@MetaIhead · Регистрация: 08.08.2018

Author24 — интернет-сервис помощи студентам

Вытаскиваю html, но не могу понять как забрать порт прокси, вроде нашёл нужный селектор, но когда беру текст этого тега и класса, то порта там нету. В Html видно что порт находиться ещё в одном классе внутре 'font.spy14', вопрос как мне туда добраться?

для селектор ('font.spy14')

Python

def getProxy():
    url_proxy='http://spys.one/en/socks-proxy-list/'
    html_url_proxy=requests.get(url_proxy)
 
    html_bs=bs4.BeautifulSoup(html_url_proxy.text, "html.parser"))
    
    list_html_proxy=html_bs.select('font.spy14')
    print(list_html_proxy[1].getText())

для селектора ('font.spy2'), всего лишь 9 элементов в листе, и это заголовки табилицы, а нужны порты

Python

def getProxy():
    url_proxy='http://spys.one/en/socks-proxy-list/'
    html_url_proxy=requests.get(url_proxy)
 
    html_bs=bs4.BeautifulSoup(html_url_proxy.text, "html.parser")
 
    list_html_proxy=html_bs.select('font.spy2')
    print(len(list_html_proxy))
    print(list_html_proxy[1].getText())

Евгений М. · 28.08.2018, 14:41

В инструментах разработчика показывается html-страничка, которая изменилась с учетом выполненых скриптов. Если же посмотреть исходной код странице с помощью, скажем, view-source:http://spys.one/en/socks-proxy-list/ то увидите, что пара вида хост:порт выглядит так:

HTML5

1	<font class=spy14>128.14.157.18<script type="text/javascript">document.write("<font class=spy2>:<\/font>"+(c3k1u1^q7x4)+(w3y5l2^z6l2)+(f6r8x4^w3g7)+(w3y5l2^z6l2))</script></font>

Такое парсить будет сложновато. Поэтому для решения задачи предлагаю смотреть в эту сторону: https://selenium-python.readth... mple-usage

	28.08.2018, 14:41