Форум программистов, компьютерный форум, киберфорум
Java EE (J2EE)
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.75/4: Рейтинг темы: голосов - 4, средняя оценка - 4.75
-1 / 0 / 0
Регистрация: 04.12.2014
Сообщений: 48

Jsoup не коннектится к гуглу

08.01.2017, 23:02. Показов 906. Ответов 2
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Java
1
2
3
4
5
6
7
8
String link ="https://www.google.com/search?q="+word.getKeyWord()+'/';
            System.out.print(link);
           
            try {
                  Document doc = Jsoup.connect(link).get();
            } catch (IOException ex) {
                 Logger.getLogger(Search.class.getName()).log(Level.SEVERE, null, ex);
        }


в чем причина и как решить эту проблему?
0
cpp_developer
Эксперт
20123 / 5690 / 1417
Регистрация: 09.04.2010
Сообщений: 22,546
Блог
08.01.2017, 23:02
Ответы с готовыми решениями:

нужен совет по парсеру jsoup и запросам к гуглу
Доброго времени суток! вопрос таков, не буду вдаваться в подробности как передо мной встала данная задача, но суть в следующем... ...

HTTP Status 500 - java.lang.NoClassDefFoundError: org/jsoup/Jsoup
Добавил библиотеку в pom, все нормально импортируется. Но в рантайме кидает ошибку: "Handler processing failed; nested exception is...

Беки по ГУГЛУ?
Помогите найти мои беки по ГУГЛУ :) Как их посмотреть? Везде 700 и выше беков (Яндекс, Рамблер, Мэйл.Ру), а тут пишет 0 и все..... Может...

2
 Аватар для we2seek
84 / 84 / 42
Регистрация: 25.01.2010
Сообщений: 386
09.01.2017, 00:55
Сейчас под рукой нет компа, чтоб проаерить, но в интернетах советуют указать юзерагента:
Java
1
2
3
Jsoup.connect(itemUrl)
     .userAgent("Mozilla/5.0 (Macintosh; Intel Mac OS X 10_9_2) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/33.0.1750.152 Safari/537.36")
     .get()
0
Эксперт Java
 Аватар для turbanoff
4094 / 3828 / 745
Регистрация: 18.05.2010
Сообщений: 9,331
Записей в блоге: 12
10.01.2017, 09:53
Цитата Сообщение от Hatsuko Посмотреть сообщение
в чем причина
Гугл не любит, когда к нему коннектятся боты, не используя API. Вот и запрещает вам получать выдачу.
Нужно попытаться прикинуться браузером, если вам нужно всё таки получать выдачу именно так.
Например отправлять стандартные http-headers который посылает браузер.
1
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
raxper
Эксперт
30234 / 6612 / 1498
Регистрация: 28.12.2010
Сообщений: 21,154
Блог
10.01.2017, 09:53
Помогаю со студенческими работами здесь

По гуглу провал
Продвигается потихоньку сайт по гуглу, закупаются ссылки и вот те на, после апа по всем запросам просел. Из последних манипуляций по...

Доказал гуглу
Ребята я сегодня подтвердил что сайт принадлежит мне путем размещения хтмл кода на главной странице того кода который хотел гугл. Размещал...

Опять по гуглу и яше
Я всё про свой сайт .... в общем он ещё молодой (меньше месяца). Гугловский бот не вылазиет с него сидит там круглосуточно ... по своему...

Нужен совет по гуглу
Всем привет! Подымал эту тему некоторое время назад в разделе для Новичков. Однако время прошло, с тех пор мало что изменилось. Сабж: ...

Подскажите эксперта по Гуглу
Всем привет, подскажите кто здесь самый большой эксперт по Гуглу. нужно ревью вебсайта и рекоммендаций. Сайт по продажи софта...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
3
Ответ Создать тему
Новые блоги и статьи
SDL3 для Web (WebAssembly): Идентификация объектов на Box2D v3 - использование userData и событий коллизий
8Observer8 02.03.2026
Содержание блога Финальная демка в браузере. Итоговый код: finish-collision-events-sdl3-c. zip https:/ / www. cyberforum. ru/ blog_attachment. php?attachmentid=11680&d=1772460536 Одним из. . .
Реалии
Hrethgir 01.03.2026
Нет, я не закончил до сих пор симулятор. Эта задача сложнее. Не получилось уйти в плавсостав, но оно и к лучшему, возможно. Точнее получалось - но сварщиком в палубную команду, а это значит, в моём. . .
Ритм жизни
kumehtar 27.02.2026
Иногда приходится жить в ритме, где дел становится всё больше, а вовлечения в происходящее — всё меньше. Плотный график не даёт вниманию закрепиться ни на одном событии. Утро начинается с быстрых,. . .
SDL3 для Web (WebAssembly): Сборка библиотек: SDL3, Box2D, FreeType, SDL3_ttf, SDL3_mixer и SDL3_image из исходников с помощью CMake и Emscripten
8Observer8 27.02.2026
Недавно вышла версия 3. 4. 2 библиотеки SDL3. На странице официальной релиза доступны исходники, готовые DLL (для x86, x64, arm64), а также библиотеки для разработки под Android, MinGW и Visual Studio. . . .
SDL3 для Web (WebAssembly): Реализация движения на Box2D v3 - трение и коллизии с повёрнутыми стенами
8Observer8 20.02.2026
Содержание блога Box2D позволяет легко создать главного героя, который не проходит сквозь стены и перемещается с заданным трением о препятствия, которые можно располагать под углом, как верхнее. . .
Конвертировать закладки radiotray-ng в m3u-плейлист
damix 19.02.2026
Это можно сделать скриптом для PowerShell. Использование . \СonvertRadiotrayToM3U. ps1 <path_to_bookmarks. json> Рядом с файлом bookmarks. json появится файл bookmarks. m3u с результатом. # Check if. . .
Семь CDC на одном интерфейсе: 5 U[S]ARTов, 1 CAN и 1 SSI
Eddy_Em 18.02.2026
Постепенно допиливаю свою "многоинтерфейсную плату". Выглядит вот так: https:/ / www. cyberforum. ru/ blog_attachment. php?attachmentid=11617&stc=1&d=1771445347 Основана на STM32F303RBT6. На борту пять. . .
Камера Toupcam IUA500KMA
Eddy_Em 12.02.2026
Т. к. у всяких "хикроботов" слишком уж мелкий пиксель, для подсмотра в ESPriF они вообще плохо годятся: уже 14 величину можно рассмотреть еле-еле лишь на экспозициях под 3 секунды (а то и больше),. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru