|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|
Как можно спарсить страницу и получить описание?04.08.2020, 10:31. Показов 6338. Ответов 61
Метки нет (Все метки)
Хочу сделать парсер описания каналов ютуб и желательно получать свой текст с помощью регулярок. Например https://www.youtube.com/user/PewDiePie/about
Какие библиотеки помогут в этом деле?
0
|
|
| 04.08.2020, 10:31 | |
|
Ответы с готовыми решениями:
61
Каким методом можно спарсить такую страницу? Как спарсить HTML страницу? Как спарсить целую страницу и со стилями |
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|
| 04.08.2020, 18:19 [ТС] | |
|
Есть еще парсеры html страницы желательно по атрибутам? Как https://simplehtmldom.sourceforge.io/manual.htm
0
|
|
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
||||||
| 04.08.2020, 18:32 [ТС] | ||||||
|
А как этот код в функцию превратить и вызывать ее так?
0
|
||||||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|
| 04.08.2020, 18:39 [ТС] | |
|
Не этот, а который вы кинули с сохранением исходного кода сайта
0
|
|
|
Just Do It!
|
|||
| 04.08.2020, 18:44 | |||
|
у меня там галиматью грузит как раз с ютуба. киберфорумом же всё нормально загружается.
0
|
|||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|
| 04.08.2020, 18:45 [ТС] | |
|
У меня не вся страница поместилась в файл, только часть. С курлом еще не разобрался, там выдает Unsupported protocol. Эту ошибку я пытался фиксить добавив в солюшн курла либы и инклюды опенссла, но ничего не вышло
0
|
|
|
Just Do It!
|
|||
| 04.08.2020, 18:51 | |||
|
вроде он там согласно мануалу может потебно конфигурировать чуть ли не из коропки. я чуть позже посмотрю. Добавлено через 1 минуту у меня галиматья такая что ничто не распарсит
0
|
|||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|||||||||||
| 04.08.2020, 19:36 [ТС] | |||||||||||
![]() Добавлено через 4 минуты Все понял, не указал WITH_DEVIL Опенссла Добавлено через 1 минуту
![]() Добавлено через 36 минут Кто компилил курл с ссл через nmake, где вы качали опенссл, может у меня не то скачано?
0
|
|||||||||||
|
1359 / 857 / 366
Регистрация: 26.02.2015
Сообщений: 3,831
|
||
| 04.08.2020, 19:48 | ||
|
Добавлено через 3 минуты В исходных файлах есть папка winbuild. В ней файл BUILD.WINDOWS.txt, почитай. Добавлено через 15 секунд В исходных файлах есть папка winbuild. В ней файл BUILD.WINDOWS.txt, почитай.
0
|
||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|||||||
| 04.08.2020, 19:54 [ТС] | |||||||
В deps это https://windows.php.net/downlo... 16-x86.zip UPD: исправил https://github.com/curl/curl/issues/1724
0
|
|||||||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
||||||||||||
| 04.08.2020, 20:05 [ТС] | ||||||||||||
0
|
||||||||||||
|
Just Do It!
|
||||||
| 04.08.2020, 20:06 | ||||||
|
сырец моего теста:
1
|
||||||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|
| 04.08.2020, 20:09 [ТС] | |
|
XLAT, спасибо, но лучше подключу курл с ssl
0
|
|
|
Just Do It!
|
||
| 04.08.2020, 21:07 | ||
|
1. Качаем исходники карла curl-7.71.1.zip и распаковываем. 2. В проектах выбираем curl-7.71.1\projects\Windows\VC15 3. Конфигурация: 4. Качаем OpenSSL Nupkg-манегером (в студии(2019) во вкладе Tools): 5. Настраиваем пути на скаченный и установленный пакидж. 5.1 Внимание: тут главное 6. Компилим либу на ура: 7. Далее тест(код тот же: см. выше по треду). 8. Настраиваем пути на скомпиленную либу и инклуд из карла. 8.1 Внимание: тут главное аккуратность и опять же внимание(тельность). ... 9. Всё работает!!!
0
|
||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
||||||||
| 05.08.2020, 10:27 [ТС] | ||||||||
|
И выдало такую ошибку:
0
|
||||||||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
||||||
| 05.08.2020, 10:38 [ТС] | ||||||
|
Также unsupported protocol
0
|
||||||
|
4086 / 2975 / 813
Регистрация: 29.06.2020
Сообщений: 11,000
|
|||
| 05.08.2020, 12:15 | |||
|
Добавлено через 2 минуты мой libcurl 7.71.1 x64
0
|
|||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|
| 05.08.2020, 14:34 [ТС] | |
|
0
|
|
| 05.08.2020, 14:34 | |
|
Как спарсить страницу, типа авторизовавшись? Synapse: Как спарсить страницу HTTPS? Как можно спарсить курсы крипты? Спарсить страницу Спарсить страницу Искать еще темы с ответами Или воспользуйтесь поиском по форуму: |
|
Новые блоги и статьи
|
|||
|
Море в объективе
kumehtar 06.07.2026
Хотел написать много проникновенных слов, но передумал.
Оно само - говорит.
Кто слышит тот слышит.
|
Оказывается, Unreal Engine позволяет качество на порядки выше, чем было в Lineedge
Etyuhibosecyu 05.07.2026
Жаль, конечно, что я не узнал об этом, пока Lineedge существовала, а то бы Noname2331 написал, что волки превращаются в пиксельную кашу, а я бы его попросил скачать какую-нибудь бриллиантовую или Pro. . .
|
Doom для терминала без стрельбы и монстров. 3D Raycasting на ascii.
dcc0 05.07.2026
Попросил нейронную сеть deepai. org написать рейкастинг 3D с библиотекой ncurses для Linux. Чтобы можно было
ходить на стрелочки. Чтобы стены были отрисованы символами. Справилась.
Первый вариант. . .
|
Установка статуса документа по условию
Maks 05.07.2026
Алгоритм из решения ниже реализован на нетиповом документе "НарядПутевка" разработанного в КА2.
Задача: в табличной части "Материалы" документа при записи автоматически устанавливать статус. . .
|
|
Сезонность и суточность закисления почв
anaschu 04.07.2026
200 часов это все равно моловато. Есть ситуации, но нестандартные, когда смена происходит за 5 лет.
Но обычно это 50 лет и более.
Наверное, закисление почвы происходит сезонно в средней. . .
|
В чем ценность человеческого опыта в глобальном смысле?
kumehtar 03.07.2026
Возможно, ценность человека не в том, что он однажды достигает мудрости, а в том, что он становится носителем карты пути. Он знает не только истину, но и последовательность внутренних изменений,. . .
|
интеграция AnyLogic с самописным REST API и переход на Odoo
anaschu 03.07.2026
Успешная интеграция AnyLogic с самописным REST API и переход на промышленную Odoo WMS
Сегодня проделал огромный путь от простой симуляции физических процессов до построения полноценной. . .
|
Поиск всех путей на ориентированном графе. Linux
dcc0 02.07.2026
Переработка старого кода из моей статьи.
Через несколько переработок от PHP кода к C89 (надеюсь, 89).
Но довольно запутанно получилось. Код для Linux.
Но если убрать time и то, что с ним. . .
|