|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|
Как можно спарсить страницу и получить описание?04.08.2020, 10:31. Показов 6361. Ответов 61
Метки нет (Все метки)
Хочу сделать парсер описания каналов ютуб и желательно получать свой текст с помощью регулярок. Например https://www.youtube.com/user/PewDiePie/about
Какие библиотеки помогут в этом деле?
0
|
|
| 04.08.2020, 10:31 | |
|
Ответы с готовыми решениями:
61
Каким методом можно спарсить такую страницу? Как спарсить HTML страницу? Как спарсить целую страницу и со стилями |
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|
| 04.08.2020, 18:19 [ТС] | |
|
Есть еще парсеры html страницы желательно по атрибутам? Как https://simplehtmldom.sourceforge.io/manual.htm
0
|
|
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
||||||
| 04.08.2020, 18:32 [ТС] | ||||||
|
А как этот код в функцию превратить и вызывать ее так?
0
|
||||||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|
| 04.08.2020, 18:39 [ТС] | |
|
Не этот, а который вы кинули с сохранением исходного кода сайта
0
|
|
|
Just Do It!
|
|||
| 04.08.2020, 18:44 | |||
|
у меня там галиматью грузит как раз с ютуба. киберфорумом же всё нормально загружается.
0
|
|||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|
| 04.08.2020, 18:45 [ТС] | |
|
У меня не вся страница поместилась в файл, только часть. С курлом еще не разобрался, там выдает Unsupported protocol. Эту ошибку я пытался фиксить добавив в солюшн курла либы и инклюды опенссла, но ничего не вышло
0
|
|
|
Just Do It!
|
|||
| 04.08.2020, 18:51 | |||
|
вроде он там согласно мануалу может потебно конфигурировать чуть ли не из коропки. я чуть позже посмотрю. Добавлено через 1 минуту у меня галиматья такая что ничто не распарсит
0
|
|||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|||||||||||
| 04.08.2020, 19:36 [ТС] | |||||||||||
![]() Добавлено через 4 минуты Все понял, не указал WITH_DEVIL Опенссла Добавлено через 1 минуту
![]() Добавлено через 36 минут Кто компилил курл с ссл через nmake, где вы качали опенссл, может у меня не то скачано?
0
|
|||||||||||
|
1359 / 857 / 366
Регистрация: 26.02.2015
Сообщений: 3,831
|
||
| 04.08.2020, 19:48 | ||
|
Добавлено через 3 минуты В исходных файлах есть папка winbuild. В ней файл BUILD.WINDOWS.txt, почитай. Добавлено через 15 секунд В исходных файлах есть папка winbuild. В ней файл BUILD.WINDOWS.txt, почитай.
0
|
||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|||||||
| 04.08.2020, 19:54 [ТС] | |||||||
В deps это https://windows.php.net/downlo... 16-x86.zip UPD: исправил https://github.com/curl/curl/issues/1724
0
|
|||||||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
||||||||||||
| 04.08.2020, 20:05 [ТС] | ||||||||||||
0
|
||||||||||||
|
Just Do It!
|
||||||
| 04.08.2020, 20:06 | ||||||
|
сырец моего теста:
1
|
||||||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|
| 04.08.2020, 20:09 [ТС] | |
|
XLAT, спасибо, но лучше подключу курл с ssl
0
|
|
|
Just Do It!
|
||
| 04.08.2020, 21:07 | ||
|
1. Качаем исходники карла curl-7.71.1.zip и распаковываем. 2. В проектах выбираем curl-7.71.1\projects\Windows\VC15 3. Конфигурация: 4. Качаем OpenSSL Nupkg-манегером (в студии(2019) во вкладе Tools): 5. Настраиваем пути на скаченный и установленный пакидж. 5.1 Внимание: тут главное 6. Компилим либу на ура: 7. Далее тест(код тот же: см. выше по треду). 8. Настраиваем пути на скомпиленную либу и инклуд из карла. 8.1 Внимание: тут главное аккуратность и опять же внимание(тельность). ... 9. Всё работает!!!
0
|
||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
||||||||
| 05.08.2020, 10:27 [ТС] | ||||||||
|
И выдало такую ошибку:
0
|
||||||||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
||||||
| 05.08.2020, 10:38 [ТС] | ||||||
|
Также unsupported protocol
0
|
||||||
|
4086 / 2975 / 813
Регистрация: 29.06.2020
Сообщений: 11,000
|
|||
| 05.08.2020, 12:15 | |||
|
Добавлено через 2 минуты мой libcurl 7.71.1 x64
0
|
|||
|
2 / 2 / 1
Регистрация: 16.02.2020
Сообщений: 73
|
|
| 05.08.2020, 14:34 [ТС] | |
|
0
|
|
| 05.08.2020, 14:34 | |
|
Как спарсить страницу, типа авторизовавшись? Synapse: Как спарсить страницу HTTPS? Как можно спарсить курсы крипты? Спарсить страницу Спарсить страницу Искать еще темы с ответами Или воспользуйтесь поиском по форуму: |
|
Новые блоги и статьи
|
|||
|
сукцессия 25. Хронология ошибок
anaschu 12.07.2026
# От 50-тонного гриба до устойчивого леса: хроника ошибок при построении модели вековой сукцессии микоризы
## О чём эта статья
В процессе построения ОДУ-модели (система дифференциальных. . .
|
сукцессия 24. Промежуточное общее описание модели
anaschu 12.07.2026
Хендофф: модель АМ→ЭКМ сукцессии микоризы (ризосфера, 50 лет)
Содержание проекта
Симуляция вековой (50 лет) экологической сукцессии в почве леса
Основные участники: АМ-гриб, ЭКМ-гриб,. . .
|
сукцессия 23. Более физиологичная физиология, более экологичная экология, более диффурные диффуры.
anaschu 12.07.2026
Что реально нашли и починили за эти 5 часов
Правило Линдемана (КПД конверсии сахара в тело, kEff) — раньше 100% полученного углерода шло прямо в биомассу гриба; теперь только kEff=0. 5 (после. . .
|
сукцессия 22. От артефактов к физиологии: калибровка агентной модели грибной сукцессии для воспроизведения сезонной динамики и pH-плато
anaschu 11.07.2026
Аннотация
В данной работе представлена калибровка агентной модели динамики грибных сообществ (fungal-succession), направленная на устранение нефизичных артефактов (коллапс биомассы, мгновенное. . .
|
|
Сукцессия 20. Война автоботов. Делаем ставки. Лёд против "пш-пш!".
anaschu 11.07.2026
Битва ИИ в ризосфере: Как мы скрестили жесткие ОДУ, закон Фика и «подземный шантаж»
Уважаемые коллеги!
Хочу поделиться уникальным опытом ведения междисциплинарной компьютерной разработки. Прямо. . .
|
Сукцессия 19. Какие выводы я сделал из модели? Часть 2.Внутримикоризный стехиометрический буфер и хроно-дискретные зоны экспансии
anaschu 11.07.2026
Био-Инженерный Ликбез: Архитектура Модели Ризосферы
Математический аппарат моделирования
|
Сукцессия 18. Какие выводы я сделал из войны грибов с деревьями? Часть 1- рассказ и немного про термины
anaschu 11.07.2026
Био-Инженерный Ликбез: Архитектура Модели Ризосферы
Математический аппарат моделирования
Система ОДУ описывает динамику изменения массы различных компонентов системы во времени. Ключевой. . .
|
Просветление в 5 секунд
kumehtar 10.07.2026
Андрей Веретенников выдал фразу недавно: "Вам не обязательно кем-то себя считать"
|