|
0 / 0 / 0
Регистрация: 29.09.2020
Сообщений: 2
|
|
| 1 | |
Подделать User-Agent01.10.2020, 22:38. Показов 2873. Ответов 2
Проблема такова: Нужно обходить капчу при парсинге сайта. Я просто забираю информацию об обьекте, но если много раз переходить по ссылке, сайт начинает что-то подозревать и выкидывать капчу. Нужно при каждом запросе посылать сайту ложный User-Agent. Если знаете сайт или сервис, где можно брать рабочие агенты, сообщите. При парсинге применяю bs4 и urllib3.
0
|
|
(| 01.10.2020, 22:38 | |
|
Ответы с готовыми решениями:
2
Парсинг. Как задать User-Agent User Agent
User agent |
|
Автоматизируй это!
 |
|
| 02.10.2020, 07:09 | 2 |
|
Tohak, какие еще рабочие агенты??? это просто инфа мол я с такого то браузера. А ты не думаешь что сайт еще видит ip и прочую инфу от тебя?
User-Agent передается заголовком при запросе, вон в урллиб используй. Правда думаю что не помжет, просто отправляй меньше запросов. Судя по тому что используешь урллиб -какой то древний мануал нашел, когда еще весь мир не использовал реквестс?
0
|
|
|
|
|
| 04.10.2020, 20:56 | 3 |
 Сообщение было отмечено Tohak как решение
Решение
Сообщение от Tohak
Но могу по секрету дать один. Держи. Никому не показывай. Этот спойлер открывается только для тебя: Кликните здесь для просмотра всего текста
James Bond/007 (Aston Martin DB5/1963; Ford Mustang Mach 1/1971; Lotus Esprit S1/1976; Rolls-Royce Silver Cloud II/1962; U; en) Sean Connery/25.08.1930 Version/1.0
Это очень крутой юзер-агент. Никакие капчи его не палят.
3
|
|
| 04.10.2020, 20:56 | |
| 04.10.2020, 20:56 | |
|
Помогаю со студенческими работами здесь
3
user-agent User agent stylesheet User-Agent в Webbrowser Пустой user-agent curl и user agent User Agent Indy Искать еще темы с ответами Или воспользуйтесь поиском по форуму: |
|
