Как обойти защиту от парсинга?

@KravchV · Регистрация: 05.06.2022

Студворк — интернет-сервис помощи студентам

Доброго времени суток!

Хочу спарсить информацию с одного сайта: наименование товара, количество, цену. Из панели разработчика выяснил, что нужная информация подгружается на сайт с помощью GET запроса. В ответ приходит json файл, где вся нужная мне информация. Причем в json файле содержится количество товара, а на сайте это никак не отражается. Скопировал URL GET запроса и вставил в адресную строку браузера. В ответ пришла ошибка с просьбой обратиться к разработчику. Там стоит какая-то защита, но как ее обойти не понимаю. Начал только изучать python. Написал пару простеньких парсеров и с таким столкнулся впервые. Не знаю с чего начать.

@Lekks · 05.06.2022, 17:53

Там скриптами все выводится. Это тебе с таймаутами надо повозиться или в сторону selenium смотреть.

Jabbson · 05.06.2022, 18:06

Сообщение от KravchV

Не знаю с чего начать.

Начать нужно с того, чтобы давать полную информацию, - какой сайт, какой запрос на json. Иначе получите догадки.

Новые блоги и статьи Все статьи Все блоги /
Программный контроль заполнения реквизита табличной части документа Maks 02.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа "СписаниеМатериалов", разработанного в конфигурации КА2. Задача: реализовать контроль заполнения реквизита табличной части. . .	wmic не является внутренней или внешней командой Maks 02.04.2026 Решение: DISM / Online / Add-Capability / CapabilityName:WMIC~~~~ Отсюда: https:/ / winitpro. ru/ index. php/ 2025/ 02/ 14/ komanda-wmic-ne-naydena/	Программная установка даты и запрет ее изменения Maks 02.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа "СписаниеМатериалов", разработанного в конфигурации КА2. Задача: при создании документов установить период списания автоматически. . .	Вывод данных в справочнике через динамический список Maks 01.04.2026 Реализация из решения ниже выполнена на примере нетипового справочника "Спецтехника" разработанного в конфигурации КА2. Задача: вывести данные из ТЧ нетипового документа. . .
Функция заполнения текстового поля в реквизите формы документа Maks 01.04.2026 Алгоритм из решения ниже реализован на нетиповом документе "ВыдачаОборудованияНаСпецтехнику" разработанного в конфигурации КА2, в дополнении к предыдущему решению. На форме документа создается. . .	К слову об оптимизации kumehtar 01.04.2026 Вспоминаю начало 2000-х, университет, когда я писал на Delphi. Тогда среди программистов на форумах активно обсуждали аккуратную работу с памятью: нужно было следить за переменными, вовремя. . .	Идея фильтра интернета (сервер = слой+фильтр). Hrethgir 31.03.2026 Суть идеи заключается в том, чтобы запустить свой сервер, о чём я если честно мечтал давно и давно приобрёл книгу как это сделать. Но не было причин его запускать. Очумелые учёные напечатали на. . .	Модель здравосоХранения 6. ESG-повестка и устойчивое развитие; углублённый анализ кадрового бренда anaschu 31.03.2026 В прикрепленном документе раздумья о том, как можно поменять модель в будущем

@KravchV 0 / 0 / 0 Регистрация: 05.06.2022 Сообщений: 6

	Как обойти защиту от парсинга? 05.06.2022, 16:05. Показов 1138. Ответов 2 Метки get set, get запрос, python 3 (Все метки) Доброго времени суток! Хочу спарсить информацию с одного сайта: наименование товара, количество, цену. Из панели разработчика выяснил, что нужная информация подгружается на сайт с помощью GET запроса. В ответ приходит json файл, где вся нужная мне информация. Причем в json файле содержится количество товара, а на сайте это никак не отражается. Скопировал URL GET запроса и вставил в адресную строку браузера. В ответ пришла ошибка с просьбой обратиться к разработчику. Там стоит какая-то защита, но как ее обойти не понимаю. Начал только изучать python. Написал пару простеньких парсеров и с таким столкнулся впервые. Не знаю с чего начать. 0

@Lekks 243 / 178 / 73 Регистрация: 17.10.2018 Сообщений: 749
	05.06.2022, 17:53
	Там скриптами все выводится. Это тебе с таймаутами надо повозиться или в сторону selenium смотреть. 0