|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|
Как можно спарсить страницу и получить описание?04.08.2020, 10:31. Показов 5955. Ответов 61
Метки нет (Все метки)
Хочу сделать парсер описания каналов ютуб и желательно получать свой текст с помощью регулярок. Например https://www.youtube.com/user/PewDiePie/about
Какие библиотеки помогут в этом деле?
0
|
|
| 04.08.2020, 10:31 | |
|
Ответы с готовыми решениями:
61
Каким методом можно спарсить такую страницу? Как спарсить HTML страницу? Как спарсить целую страницу и со стилями |
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|
| 04.08.2020, 18:19 [ТС] | |
|
Есть еще парсеры html страницы желательно по атрибутам? Как https://simplehtmldom.sourceforge.io/manual.htm
0
|
|
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
||||||
| 04.08.2020, 18:32 [ТС] | ||||||
|
А как этот код в функцию превратить и вызывать ее так?
0
|
||||||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|
| 04.08.2020, 18:39 [ТС] | |
|
Не этот, а который вы кинули с сохранением исходного кода сайта
0
|
|
|
Just Do It!
|
|||
| 04.08.2020, 18:44 | |||
|
у меня там галиматью грузит как раз с ютуба. киберфорумом же всё нормально загружается.
0
|
|||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|
| 04.08.2020, 18:45 [ТС] | |
|
У меня не вся страница поместилась в файл, только часть. С курлом еще не разобрался, там выдает Unsupported protocol. Эту ошибку я пытался фиксить добавив в солюшн курла либы и инклюды опенссла, но ничего не вышло
0
|
|
|
Just Do It!
|
|||
| 04.08.2020, 18:51 | |||
|
вроде он там согласно мануалу может потебно конфигурировать чуть ли не из коропки. я чуть позже посмотрю. Добавлено через 1 минуту у меня галиматья такая что ничто не распарсит
0
|
|||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|||||||||||
| 04.08.2020, 19:36 [ТС] | |||||||||||
![]() Добавлено через 4 минуты Все понял, не указал WITH_DEVIL Опенссла Добавлено через 1 минуту
![]() Добавлено через 36 минут Кто компилил курл с ссл через nmake, где вы качали опенссл, может у меня не то скачано?
0
|
|||||||||||
|
1357 / 856 / 365
Регистрация: 26.02.2015
Сообщений: 3,814
|
||
| 04.08.2020, 19:48 | ||
|
Добавлено через 3 минуты В исходных файлах есть папка winbuild. В ней файл BUILD.WINDOWS.txt, почитай. Добавлено через 15 секунд В исходных файлах есть папка winbuild. В ней файл BUILD.WINDOWS.txt, почитай.
0
|
||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|||||||
| 04.08.2020, 19:54 [ТС] | |||||||
В deps это https://windows.php.net/downlo... 16-x86.zip UPD: исправил https://github.com/curl/curl/issues/1724
0
|
|||||||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
||||||||||||
| 04.08.2020, 20:05 [ТС] | ||||||||||||
0
|
||||||||||||
|
Just Do It!
|
||||||
| 04.08.2020, 20:06 | ||||||
|
сырец моего теста:
1
|
||||||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|
| 04.08.2020, 20:09 [ТС] | |
|
XLAT, спасибо, но лучше подключу курл с ssl
0
|
|
|
Just Do It!
|
||
| 04.08.2020, 21:07 | ||
|
1. Качаем исходники карла curl-7.71.1.zip и распаковываем. 2. В проектах выбираем curl-7.71.1\projects\Windows\VC15 3. Конфигурация: 4. Качаем OpenSSL Nupkg-манегером (в студии(2019) во вкладе Tools): 5. Настраиваем пути на скаченный и установленный пакидж. 5.1 Внимание: тут главное 6. Компилим либу на ура: 7. Далее тест(код тот же: см. выше по треду). 8. Настраиваем пути на скомпиленную либу и инклуд из карла. 8.1 Внимание: тут главное аккуратность и опять же внимание(тельность). ... 9. Всё работает!!!
0
|
||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
||||||||
| 05.08.2020, 10:27 [ТС] | ||||||||
|
И выдало такую ошибку:
0
|
||||||||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
||||||
| 05.08.2020, 10:38 [ТС] | ||||||
|
Также unsupported protocol
0
|
||||||
|
Заблокирован
|
|||
| 05.08.2020, 12:15 | |||
|
Добавлено через 2 минуты мой libcurl 7.71.1 x64
0
|
|||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|
| 05.08.2020, 14:34 [ТС] | |
|
0
|
|
| 05.08.2020, 14:34 | |
|
Помогаю со студенческими работами здесь
40
Как спарсить страницу, типа авторизовавшись? Synapse: Как спарсить страницу HTTPS? Как можно спарсить курсы крипты? Спарсить страницу Спарсить страницу Искать еще темы с ответами Или воспользуйтесь поиском по форуму: |
|
Новые блоги и статьи
|
||||
|
PhpStorm 2025.3: WSL Terminal всегда стартует в ~
and_y87 14.12.2025
PhpStorm 2025. 3: WSL Terminal всегда стартует в ~ (home), игнорируя директорию проекта
Симптом:
После обновления до PhpStorm 2025. 3 встроенный терминал WSL открывается в домашней директории. . .
|
Как объединить две одинаковые БД Access с разными данными
VikBal 11.12.2025
Помогите пожалуйста !! Как объединить 2 одинаковые БД Access с разными данными.
|
Новый ноутбук
volvo 07.12.2025
Всем привет.
По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне:
Ryzen 5 7533HS
64 Gb DDR5
1Tb NVMe
16" Full HD Display
Win11 Pro
|
Музыка, написанная Искусственным Интеллектом
volvo 04.12.2025
Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .
|
От async/await к виртуальным потокам в Python
IndentationError 23.11.2025
Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .
|
|
Поиск "дружественных имён" СОМ портов
Argus19 22.11.2025
Поиск "дружественных имён" СОМ портов
На странице:
https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/
нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .
|
Сколько Государство потратило денег на меня, обеспечивая инсулином.
Programma_Boinc 20.11.2025
Сколько Государство потратило денег на меня, обеспечивая инсулином.
Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов.
. . .
|
Ломающие изменения в C#.NStar Alpha
Etyuhibosecyu 20.11.2025
Уже можно не только тестировать, но и пользоваться C#. NStar - писать оконные приложения, содержащие надписи, кнопки, текстовые поля и даже изображения, например, моя игра "Три в ряд" написана на этом. . .
|
Мысли в слух
kumehtar 18.11.2025
Кстати, совсем недавно имел разговор на тему медитаций с людьми. И обнаружил, что они вообще не понимают что такое медитация и зачем она нужна. Самые базовые вещи. Для них это - когда просто люди. . .
|
Создание Single Page Application на фреймах
krapotkin 16.11.2025
Статья исключительно для начинающих. Подходы оригинальностью не блещут.
В век Веб все очень привыкли к дизайну Single-Page-Application .
Быстренько разберем подход "на фреймах".
Мы делаем одну. . .
|