Форум программистов, компьютерный форум, киберфорум
Наши страницы

Java EE (J2EE)

Войти
Регистрация
Восстановить пароль
 
Hatsuko
-1 / 0 / 0
Регистрация: 04.12.2014
Сообщений: 47
#1

Jsoup не коннектится к гуглу - Java EE

08.01.2017, 23:02. Просмотров 226. Ответов 2
Метки нет (Все метки)

Java
1
2
3
4
5
6
7
8
String link ="https://www.google.com/search?q="+word.getKeyWord()+'/';
            System.out.print(link);
           
            try {
                  Document doc = Jsoup.connect(link).get();
            } catch (IOException ex) {
                 Logger.getLogger(Search.class.getName()).log(Level.SEVERE, null, ex);
        }
Jsoup не коннектится к гуглу

в чем причина и как решить эту проблему?
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
Similar
Эксперт
41792 / 34177 / 6122
Регистрация: 12.04.2006
Сообщений: 57,940
08.01.2017, 23:02
Здравствуйте! Я подобрал для вас темы с ответами на вопрос Jsoup не коннектится к гуглу (Java EE):

HTTP Status 500 - java.lang.NoClassDefFoundError: org/jsoup/Jsoup - Java EE
Добавил библиотеку в pom, все нормально импортируется. Но в рантайме кидает ошибку: "Handler processing failed; nested exception is...

Parsing with jsoup - Java EE
Задача: есть ссылка на youtube видео. Нужно вывести ссылки на 3 related video к первоначальной ссылке. Пусть ссылка будет...

Получить полную ссылку jsoup 1.7.3 - Java
Убил уже кучу времени, а так и не понял как получить полные пути ссылок со страницы. jsoup 1.7.3 Подскажите, уверен, что дело пары...

Jsoup. Парсинг при авторизации - Java
Парсю сайт. На странице есть элемент (цена), значение которого меняется в зависимости от того гость это или авторизованный пользователь. ...

Parse HTML c использованием JSoup. Оценка оптимальности - Java
Постановка задачи: необходимо по заданной дате получить с сайта http://cbr.ru/ данные по курсу золота для последующей загрузки в базу. ...

jsoup-1.7.3 как избавиться от крякозябр вместо кириллицы - Java
Добрый день, форумчане. С Java только только начинаю разбираться. Знаний по данному вопросу 0,000001 Как узнать в какой кодировке...

2
we2seek
80 / 80 / 17
Регистрация: 25.01.2010
Сообщений: 385
09.01.2017, 00:55 #2
Сейчас под рукой нет компа, чтоб проаерить, но в интернетах советуют указать юзерагента:
Java
1
2
3
Jsoup.connect(itemUrl)
     .userAgent("Mozilla/5.0 (Macintosh; Intel Mac OS X 10_9_2) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/33.0.1750.152 Safari/537.36")
     .get()
0
turbanoff
Модератор
Эксперт Java
3973 / 3708 / 460
Регистрация: 18.05.2010
Сообщений: 9,286
Записей в блоге: 11
Завершенные тесты: 1
10.01.2017, 09:53 #3
Цитата Сообщение от Hatsuko Посмотреть сообщение
в чем причина
Гугл не любит, когда к нему коннектятся боты, не используя API. Вот и запрещает вам получать выдачу.
Нужно попытаться прикинуться браузером, если вам нужно всё таки получать выдачу именно так.
Например отправлять стандартные http-headers который посылает браузер.
1
MoreAnswers
Эксперт
37091 / 29110 / 5898
Регистрация: 17.06.2006
Сообщений: 43,301
10.01.2017, 09:53
Привет! Вот еще темы с ответами:

Jsoup парсинг взаимодействие между классами - подскажите разобраться - Java
Есть класс который парсит xml файл public class Myversion { public static void main(String argv) { try { ...

Jsoup качает всю страницу целиком? или только html (без картинок, css и т.д.)? - Java
"тащю" кусок div по id. Как измерить трафик? Jsoup выкачивает только исходный код, без "бесполезных" картинок? использую: ...

нужен совет по парсеру jsoup и запросам к гуглу - Java Сети
Доброго времени суток! вопрос таков, не буду вдаваться в подробности как передо мной встала данная задача, но суть в следующем... ...

Как угодить гуглу с оптимизацией? - Google
Помогите пожалуйста разобраться с сжатием изображений. Тестирую свой сайт http://android-program.com на скорость загрузки через...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
3
Ответ Создать тему
Опции темы

КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin® Version 3.8.9
Copyright ©2000 - 2017, vBulletin Solutions, Inc.
Рейтинг@Mail.ru