Парсинг html, содержащей скрипт

@Antykus · Регистрация: 10.05.2014

Студворк — интернет-сервис помощи студентам

Цель - получить полный код некой страницы. Использую WebBrowser. После полной загрузки страницы в коде страницы обнаружил отсутствие ключевых элементов. Покопавшись в коде понял, что эти самые элементы формируются неким скриптом. Не нашёл при этом в коде страницы наименования функции. Подскажите, куда копать. Если открыть эту страницу в InternetExplorer и там открыть исходный код страницы - то же самое, нужная инфа скрыта где-то в недрах скриптов

@Antykus · 14.12.2016, 14:24 **[ТС]**

EvilFromHell, скажите пожалуйста, имеет ли смысл переписывать код с httpWebRequest на использование httpClient? И я всё никак не пойму, существует ли способ авторизации на сайтах одним запросом. Сейчас реализовал так - посмотрел в фидлере какие запросы идут к сайту, и для каждого запроса создаю свой httpWebRequest, к каждому свои куки.. Можно ли сделать так чтобы прога сама поняла по какому пути идти после одного запроса, не используя WebBrowser, в чём смысл свойства авторедирект у запросов

@OwenGlendower · 14.12.2016, 18:13

Сообщение от Antykus

в чём смысл свойства авторедирект у запросов

При запросе некоторых страниц веб-сервер может вместо этого отправить ответ перенаправляющий на другую страницу. При включенном авторедиректе http-клиент делает новый запрос к новой странице. Подобное поведение часто используется на страницах аутентификации. Клиент делает POST запрос с логином/паролем, сервер проверяет их и в случае успеха отправляет ответ с редиректом на страницу которую имеет смысл показать после успешного логина - например, личный кабинет пользователя.

Сообщение от Antykus

И я всё никак не пойму, существует ли способ авторизации на сайтах одним запросом

Смотря что ты имеешь под этим в виду. Если речь о конкретном сайте, то скорее всего да. Если речь о универсальном решении для любого сайта, то нет т.к. процесс аутентификации не стандартизован.

@Antykus · 15.12.2016, 18:00 **[ТС]**

Итак, отвечу на свой вопрос - да, переписывать код с httpWebRequest на HttpClient имеет смысл.

Новые блоги и статьи Все статьи Все блоги /
Про "Windows must die!" kumehtar 04.11.2026 Знаете, чет накатило. . . . Когда-то это было почти боевым кличем: мол, нормальный человек сидит на DOS, OS/ 2 или Linux, а вот это вот - Must Die. А теперь человек произносит «мастдай» с усмешкой - и. . .	Красочные поля с номером страницы svg+background-image russiannick 04.11.2026 Красочные поля с номером страницы не менее важны чем в эпоху бумажных книг. Посему спешу представить почтеннейшей публике этот важный инструмент который эти поля и формирует. В процессе разработки. . .	Вступаем в новую фазу генерации favicons, векторную. russiannick 02.11.2026 Теперь нет нужды скрывать что используется простой svg. Исходный код изображения помещаем в поле и жмем кнопку. Исходник преобразуется в вид корректный для помещения в favicon или в url(). Нажатие. . .	Генератор паролей (вариант №4) Maks 01.11.2026 После публикации 3-го варианта генератора паролей, разослал его своим коллегам (с целью оценки), в итоге были получены следующие рекомендации: 1. Вернуть возможность использования знаков \| 1 l I;. . .
Генератор паролей (вариант №3) Maks 30.10.2026 Финальная версия генератора паролей 1С. Доработка решения в этот раз коснулась только визуальной части, а именно, добавлен реквизит ДопПараметры (тип Булево), который скрывает/ отображает реквизиты:. . .	Магическое мышление и магия, современная наука не отличима от магии (говорит ИИ Джемени) zorxor 30.10.2026 Джемени, расскажи, пожалуйста, что такое магическое мышление, что такое магия, почему современная наука чем-то напоминает магию? Фраза «Любая достаточно развитая технология неотличима от магии». . .	За какое время ИИ может подобрать пароль по хешу (рассказывает Джемени ИИ) zorxor 30.10.2026 Расскажи, Джемени, если известен хэш МД5, например, за сколько ИИ сможет подобрать соответствующий пароль? Искусственный интеллект (ИИ) может подобрать простой или средний по сложности пароль по. . .	Кто убил Suno? Почему наше солнышко погасло? (диалог с ИИ Джемени) zorxor 30.10.2026 Как убивали Suno. Хронология. «Убийство» музыкальной нейросети Suno — это затяжной процесс, в котором технологический хайп стартапа разбился о жесткую реальность судебных исков от гигантов. . .

@Antykus 0 / 0 / 2 Регистрация: 10.05.2014 Сообщений: 230

	Парсинг html, содержащей скрипт 02.12.2016, 22:10. Показов 5381. Ответов 22 Метки html, parsing (Все метки) Цель - получить полный код некой страницы. Использую WebBrowser. После полной загрузки страницы в коде страницы обнаружил отсутствие ключевых элементов. Покопавшись в коде понял, что эти самые элементы формируются неким скриптом. Не нашёл при этом в коде страницы наименования функции. Подскажите, куда копать. Если открыть эту страницу в InternetExplorer и там открыть исходный код страницы - то же самое, нужная инфа скрыта где-то в недрах скриптов 0

@Antykus 0 / 0 / 2 Регистрация: 10.05.2014 Сообщений: 230
	14.12.2016, 14:24 [ТС]
	EvilFromHell, скажите пожалуйста, имеет ли смысл переписывать код с httpWebRequest на использование httpClient? И я всё никак не пойму, существует ли способ авторизации на сайтах одним запросом. Сейчас реализовал так - посмотрел в фидлере какие запросы идут к сайту, и для каждого запроса создаю свой httpWebRequest, к каждому свои куки.. Можно ли сделать так чтобы прога сама поняла по какому пути идти после одного запроса, не используя WebBrowser, в чём смысл свойства авторедирект у запросов 0

@Antykus 0 / 0 / 2 Регистрация: 10.05.2014 Сообщений: 230
	15.12.2016, 18:00 [ТС]
	Итак, отвечу на свой вопрос - да, переписывать код с httpWebRequest на HttpClient имеет смысл. 0