С Новым годом! Форум программистов, компьютерный форум, киберфорум
Python
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.59/41: Рейтинг темы: голосов - 41, средняя оценка - 4.59
 Аватар для Zuzik
298 / 256 / 57
Регистрация: 11.06.2012
Сообщений: 1,557

Парсинг сайтов. Поиск всех ссылок на странице

12.04.2014, 01:32. Показов 7506. Ответов 1
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Суть вопроса думаю ясна. Есть интернет страница, с нее нужно выдрать ссылки. Решил воспользоваться lxml.html. Делаю аналогично примеру
Python
1
2
3
4
import lxml.html
html = lxml.html.document_fromstring(doc)
for element, attribute, link, pos in html.iterlinks():
#дальше какой нибудь код
Но в чем проблема - в ссылке мне нужно то как она отображается на странице т.е. из <a href="адрес">какой то текст</a> мне нужно взять и "адрес" и "какой то текст". Данным способом получилось достать только адрес. Подскажите как достать и текст. Заранее спасибо.
0
IT_Exp
Эксперт
34794 / 4073 / 2104
Регистрация: 17.06.2006
Сообщений: 32,602
Блог
12.04.2014, 01:32
Ответы с готовыми решениями:

Поиск всех ссылок на странице
Добрый день всем. Необходимо регулярное выражение для поиска всех ссылок на странице.

Поиск всех внешних ссылок на HTML странице без повторения
Код страницы получил,но не могу написать регулярку которая будет искать все внешние ссілки без повторения(моя регулярка достает все что...

При нажатии определенных ссылок или области на странице сайтов - окно браузера становится неактивным
При нажатии на определенные ссылки или области на странице сайтов - окно браузера становится неактивным и в эту область становится вообще...

1
224 / 209 / 63
Регистрация: 26.05.2011
Сообщений: 363
12.04.2014, 10:42
Python
1
2
3
4
import lxml.html
html = lxml.html.document_fromstring(doc)
for a in html.iter("a"):
    print(a.text, a.get("href"))
2
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
BasicMan
Эксперт
29316 / 5623 / 2384
Регистрация: 17.02.2009
Сообщений: 30,364
Блог
12.04.2014, 10:42
Помогаю со студенческими работами здесь

Парсинг всех ссылок в массив
Помогите примерчик сообразить, желательно с выводом n одного из элементов массива все ссылки в формате: &lt;a href=&quot;ССЫЛКА&quot;...

Парсинг всех ссылок регулярным выражением
Добрый вечер. Такая проблема: мне нужно спарсить все ссылки с сайта www.rt.com используя регулярные выражения. Почитал документацию,...

Поиск ссылок на странице
Добрый день, помогите,пожалуйста, с реализацией задачи: есть три фрейма, по нажатию клавиши в 1 фрейме, все ссылки со страницы 2 фрейма...

Парсинг html - Вывод всех ссылок с их текстовыми полями
Доброго времени суток, уважаемые форумчане! Недавно встал вопрос о написании парсера для html. Задача парсинга: вывод всех ссылок с их...

Поиск на WEB странице ссылок, к клики по ней
Коллеги добрый день! Как осуществить ЗАДУМАННОЕ Пример...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
2
Ответ Создать тему
Новые блоги и статьи
Изучаю kubernetes
lagorue 13.01.2026
А пригодятся-ли мне знания kubernetes в России?
Сукцессия микоризы: основная теория в виде двух уравнений.
anaschu 11.01.2026
https:/ / rutube. ru/ video/ 7a537f578d808e67a3c6fd818a44a5c4/
WordPad для Windows 11
Jel 10.01.2026
WordPad для Windows 11 — это приложение, которое восстанавливает классический текстовый редактор WordPad в операционной системе Windows 11. После того как Microsoft исключила WordPad из. . .
Classic Notepad for Windows 11
Jel 10.01.2026
Old Classic Notepad for Windows 11 Приложение для Windows 11, позволяющее пользователям вернуть классическую версию текстового редактора «Блокнот» из Windows 10. Программа предоставляет более. . .
Почему дизайн решает?
Neotwalker 09.01.2026
В современном мире, где конкуренция за внимание потребителя достигла пика, дизайн становится мощным инструментом для успеха бренда. Это не просто красивый внешний вид продукта или сайта — это. . .
Модель микоризы: классовый агентный подход 3
anaschu 06.01.2026
aa0a7f55b50dd51c5ec569d2d10c54f6/ O1rJuneU_ls https:/ / vkvideo. ru/ video-115721503_456239114
Owen Logic: О недопустимости использования связки «аналоговый ПИД» + RegKZR
ФедосеевПавел 06.01.2026
Owen Logic: О недопустимости использования связки «аналоговый ПИД» + RegKZR ВВЕДЕНИЕ Введу сокращения: аналоговый ПИД — ПИД регулятор с управляющим выходом в виде числа в диапазоне от 0% до. . .
Модель микоризы: классовый агентный подход 2
anaschu 06.01.2026
репозиторий https:/ / github. com/ shumilovas/ fungi ветка по-частям. коммит Create переделка под биомассу. txt вход sc, но sm считается внутри мицелия. кстати, обьем тоже должен там считаться. . . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru