Аватар для Zuzik
298 / 256 / 57
Регистрация: 11.06.2012
Сообщений: 1,557

Парсинг сайтов. Поиск всех ссылок на странице

12.04.2014, 01:32. Показов 7538. Ответов 1
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Суть вопроса думаю ясна. Есть интернет страница, с нее нужно выдрать ссылки. Решил воспользоваться lxml.html. Делаю аналогично примеру
Python
1
2
3
4
import lxml.html
html = lxml.html.document_fromstring(doc)
for element, attribute, link, pos in html.iterlinks():
#дальше какой нибудь код
Но в чем проблема - в ссылке мне нужно то как она отображается на странице т.е. из <a href="адрес">какой то текст</a> мне нужно взять и "адрес" и "какой то текст". Данным способом получилось достать только адрес. Подскажите как достать и текст. Заранее спасибо.
0
IT_Exp
Эксперт
34794 / 4073 / 2104
Регистрация: 17.06.2006
Сообщений: 32,602
Блог
12.04.2014, 01:32
Ответы с готовыми решениями:

Поиск всех ссылок на странице
Добрый день всем. Необходимо регулярное выражение для поиска всех ссылок на странице.

Поиск всех внешних ссылок на HTML странице без повторения
Код страницы получил,но не могу написать регулярку которая будет искать все внешние ссілки без повторения(моя регулярка достает все что...

При нажатии определенных ссылок или области на странице сайтов - окно браузера становится неактивным
При нажатии на определенные ссылки или области на странице сайтов - окно браузера становится неактивным и в эту область становится вообще...

1
224 / 209 / 63
Регистрация: 26.05.2011
Сообщений: 363
12.04.2014, 10:42
Python
1
2
3
4
import lxml.html
html = lxml.html.document_fromstring(doc)
for a in html.iter("a"):
    print(a.text, a.get("href"))
2
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
BasicMan
Эксперт
29316 / 5623 / 2384
Регистрация: 17.02.2009
Сообщений: 30,364
Блог
12.04.2014, 10:42
Помогаю со студенческими работами здесь

Парсинг всех ссылок в массив
Помогите примерчик сообразить, желательно с выводом n одного из элементов массива все ссылки в формате: &lt;a href=&quot;ССЫЛКА&quot;...

Парсинг всех ссылок регулярным выражением
Добрый вечер. Такая проблема: мне нужно спарсить все ссылки с сайта www.rt.com используя регулярные выражения. Почитал документацию,...

Поиск ссылок на странице
Добрый день, помогите,пожалуйста, с реализацией задачи: есть три фрейма, по нажатию клавиши в 1 фрейме, все ссылки со страницы 2 фрейма...

Парсинг html - Вывод всех ссылок с их текстовыми полями
Доброго времени суток, уважаемые форумчане! Недавно встал вопрос о написании парсера для html. Задача парсинга: вывод всех ссылок с их...

Поиск на WEB странице ссылок, к клики по ней
Коллеги добрый день! Как осуществить ЗАДУМАННОЕ Пример...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
2
Ответ Создать тему
Опции темы

Новые блоги и статьи
Символьное дифференцирование
igorrr37 13.02.2026
/ * Логарифм записывается как: (x-2)log(x^2+2) - означает логарифм (x^2+2) по основанию (x-2). Унарный минус обозначается как ! */ #include <iostream> #include <stack> #include <cctype>. . .
Камера Toupcam IUA500KMA
Eddy_Em 12.02.2026
Т. к. у всяких "хикроботов" слишком уж мелкий пиксель, для подсмотра в ESPriF они вообще плохо годятся: уже 14 величину можно рассмотреть еле-еле лишь на экспозициях под 3 секунды (а то и больше),. . .
И ясному Солнцу
zbw 12.02.2026
И ясному Солнцу, и светлой Луне. В мире покоя нет и люди не могут жить в тишине. А жить им немного лет.
«Знание-Сила»
zbw 12.02.2026
«Знание-Сила» «Время-Деньги» «Деньги -Пуля»
SDL3 для Web (WebAssembly): Подключение Box2D v3, физика и отрисовка коллайдеров
8Observer8 12.02.2026
Содержание блога Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами и вызывать обработчики событий столкновения. . . .
SDL3 для Web (WebAssembly): Загрузка PNG с прозрачным фоном с помощью SDL_LoadPNG (без SDL3_image)
8Observer8 11.02.2026
Содержание блога Библиотека SDL3 содержит встроенные инструменты для базовой работы с изображениями - без использования библиотеки SDL3_image. Пошагово создадим проект для загрузки изображения. . .
SDL3 для Web (WebAssembly): Загрузка PNG с прозрачным фоном с помощью SDL3_image
8Observer8 10.02.2026
Содержание блога Библиотека SDL3_image содержит инструменты для расширенной работы с изображениями. Пошагово создадим проект для загрузки изображения формата PNG с альфа-каналом (с прозрачным. . .
Установка Qt-версии Lazarus IDE в Debian Trixie Xfce
volvo 10.02.2026
В общем, достали меня глюки IDE Лазаруса, собранной с использованием набора виджетов Gtk2 (конкретно: если набирать текст в редакторе и вызвать подсказку через Ctrl+Space, то после закрытия окошка. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru