Invoke-WebRequest скачивает страницу без контента

@Uragan66 · Регистрация: 27.03.2017

Студворк — интернет-сервис помощи студентам

Добрый день всем!
Прошу помощи в решении такого вопроса:
Писал парсер для одного сайта. Для вытаскивания нужного содержимого используется переход по нескольким ссылкам.
Поначалу всё было нормально, но дальше пошли ошибки, так как Invoke-WebRequest начал скачивать пустую страницу, без контента.
Хотя в бразуре при переходе по ссылке с исходного кода, открывается страница с нужным контентом.

PowerShell
1
2
3
4
$l = ((Invoke-WebRequest -URI 'какой-то сайт' -TimeoutSec 10 -SessionVariable session).Content | Select-String -Pattern '.*<iframe.*"(https?[^"]+)".*' -AllMatches).Matches| 
ForEach-Object {"$($_.Groups[2].Value)`n$($_.Groups[1].Value)"}
 
(Invoke-WebRequest -UseBasicParsing -URI $l -WebSession $session).Content | Out-File .\cont.txt

В чём здесь может быть проблема, подскажите, пожалуйста, хотя бы в общих чертах. Понимаю, что для нормального совета нужна ссылка на сайт, но не хотелось бы светить её в паблике.

@skouzmine · 14.12.2019, 17:51

Sesssion Cookies ? https://qna.habr.com/q/348685

@Uragan66 · 14.12.2019, 18:21 **[ТС]**

Сообщение от skouzmine

Sesssion Cookies

skouzmine, а как их можно передать в запросе посредством Invoke-WebRequest ?
Хотя подозреваю, что на том сайте другая проблема. Нужный контент на странице формируется каким-то скриптом с предыдущей страницы. Так как даже в браузере страница бывает открывается пустой..

@skouzmine · 14.12.2019, 20:07

добыче куки подробно описана много где
https://gallery.technet.micros... g-3c373c7e
по моему
powershell это слабый инструмент для работы с вебом переходите на селениум или cdp
- все у чего есть C# клиент можно вообще говоря создать PS версию и часто уже есть

Новые блоги и статьи Все статьи Все блоги /
PhpStorm 2025.3: WSL Terminal всегда стартует в ~ and_y87 14.12.2025 PhpStorm 2025. 3: WSL Terminal всегда стартует в ~ (home), игнорируя директорию проекта Симптом: После обновления до PhpStorm 2025. 3 встроенный терминал WSL открывается в домашней директории. . .	Access VikBal 11.12.2025 Помогите пожалуйста !! Как объединить 2 одинаковые БД Access с разными данными.	Новый ноутбук volvo 07.12.2025 Всем привет. По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне: Ryzen 5 7533HS 64 Gb DDR5 1Tb NVMe 16" Full HD Display Win11 Pro	Музыка, написанная Искусственным Интеллектом volvo 04.12.2025 Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .	От async/await к виртуальным потокам в Python IndentationError 23.11.2025 Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .
Поиск "дружественных имён" СОМ портов Argus19 22.11.2025 Поиск "дружественных имён" СОМ портов На странице: https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/ нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .	Сколько Государство потратило денег на меня, обеспечивая инсулином. Programma_Boinc 20.11.2025 Сколько Государство потратило денег на меня, обеспечивая инсулином. Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов. . . .	Ломающие изменения в C#.NStar Alpha Etyuhibosecyu 20.11.2025 Уже можно не только тестировать, но и пользоваться C#. NStar - писать оконные приложения, содержащие надписи, кнопки, текстовые поля и даже изображения, например, моя игра "Три в ряд" написана на этом. . .	Мысли в слух kumehtar 18.11.2025 Кстати, совсем недавно имел разговор на тему медитаций с людьми. И обнаружил, что они вообще не понимают что такое медитация и зачем она нужна. Самые базовые вещи. Для них это - когда просто люди. . .	Создание Single Page Application на фреймах krapotkin 16.11.2025 Статья исключительно для начинающих. Подходы оригинальностью не блещут. В век Веб все очень привыкли к дизайну Single-Page-Application . Быстренько разберем подход "на фреймах". Мы делаем одну. . .

@skouzmine 505 / 158 / 49 Регистрация: 27.02.2016 Сообщений: 818
	14.12.2019, 17:51
	Sesssion Cookies ? https://qna.habr.com/q/348685 0

@skouzmine 505 / 158 / 49 Регистрация: 27.02.2016 Сообщений: 818
	14.12.2019, 20:07
	добыче куки подробно описана много где https://gallery.technet.micros... g-3c373c7e по моему powershell это слабый инструмент для работы с вебом переходите на селениум или cdp - все у чего есть C# клиент можно вообще говоря создать PS версию и часто уже есть 1