Что такое java.net.SocketTimeoutException: ?

@iaks · Регистрация: 29.11.2013

Студворк — интернет-сервис помощи студентам

При парсинге сайта, когда выбрал уже две трети от нужных информации NetBeans выдает следующее

Java
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
Exception in thread "main" java.net.SocketTimeoutException: Read timed out
    at java.net.SocketInputStream.socketRead0(Native Method)
    at java.net.SocketInputStream.read(SocketInputStream.java:152)
    at java.net.SocketInputStream.read(SocketInputStream.java:122)
    at java.io.BufferedInputStream.fill(BufferedInputStream.java:235)
    at java.io.BufferedInputStream.read1(BufferedInputStream.java:275)
    at java.io.BufferedInputStream.read(BufferedInputStream.java:334)
    at sun.net.[url]www.http.HttpClient.parseHTTPHeader(HttpClient.java:687[/url])
    at sun.net.[url]www.http.HttpClient.parseHTTP(HttpClient.java:633[/url])
    at sun.net.[url]www.protocol.http.HttpURLConnection.getInputStream(HttpURLConnection.java:1323[/url])
    at java.net.HttpURLConnection.getResponseCode(HttpURLConnection.java:468)
    at org.jsoup.helper.HttpConnection$Response.execute(HttpConnection.java:443)
    at org.jsoup.helper.HttpConnection$Response.execute(HttpConnection.java:424)
    at org.jsoup.helper.HttpConnection.execute(HttpConnection.java:178)
    at org.jsoup.helper.HttpConnection.get(HttpConnection.java:167)
    at parser.main(parser.java:62)
Java Result: 1
СБОРКА УСПЕШНО ЗАВЕРШЕНА (общее время: 9 минуты 22 секунды)

В чем может быть затык и как его обойти?

@tankomaz · 01.01.2014, 20:04

1) увеличить время ожидания
2) ловить через try/catch и принимать решение что делать (либо в повторный вызов ставить, либо игнорировать если не принципиально)

Добавлено через 1 минуту
и такой вопрос, вы каждый элемент дергаете с повторным запросом? спарсите текст страницы в переменную, а уже потом его "штрудируйте" на куски

@iaks · 01.01.2014, 23:43 **[ТС]**

tankomaz, мои вопросы позвольте задать пару нубских вопросов..
1. Как увеличить время ожидания
2. Где лучше почитать про try/catch, так сказать для начинающих?

3. Вроде так и делаю, правда собираю данные в цикле с примерно 5000 страниц

Java
1
2
3
4
// получаю страницу в цикле (их примерно 5000)
doc3 = Jsoup.connect(ХHref).get();
// получаю нужные элементы
Elements link = doc3.getElementsByClass("tolink");

Или все же не так?

Добавлено через 18 минут
Про задержку вроде нашел

Java
1
doc3 = Jsoup.connect(ХHref).timeout(10*1000).get();

Но, если это применить ко всем страницам, то времени для парсинга потребуется...
5000 * 10/60/60 = 13,9 часов

Жесть...
Будет ли эффективней использовать try/catch?

@turbanoff · 02.01.2014, 01:17

таймут не означает, что каждый запрос будет выполняться столько.
Это всего лишь лимит, после которого считается, что сервер недоступен.

@iaks · 02.01.2014, 02:30 **[ТС]**

Какой лучше выставить?

Добавлено через 28 минут
Решено...

Новые блоги и статьи Все статьи Все блоги /
Программный отбор элементов справочника Номенклатура по группе 1С Maks 22.03.2026 Установка программного отбора элементов справочника "Номенклатура" из модуля формы документа. В качестве фильтра для отбора справочника служит группа номенклатуры. Отбор под наименованию группы (на. . .	Как я обхитрил таблицу Word Alexander-7 21.03.2026 Когда мигает курсор у внешнего края таблицы, и нам надо перейти на новую строку, а при нажатии Enter создается новый ряд таблицы с ячейками, то мы вместо нервных нажатий Энтеров мы пишем любые буквы. . .	Krabik - рыболовный бот для WoW 3.3.5a AmbA 21.03.2026 без регистрации и смс. Это не торговля, приложение не содержит рекламы. Выполняет свою непосредственную задачу - автоматизацию рыбалки в WoW - и ничего более. Однако если админы будут против -. . .	Программный отбор элементов справочника Сотрудники по перечислениям 1С Maks 21.03.2026 Установка программного отбора элементов справочника "Сотрудники" из модуля формы документа. В качестве фильтра для отбора служит предопределенное значение перечислений. Процедура. . .
Переходник USB-CAN-GPIO Eddy_Em 20.03.2026 Достаточно давно на работе возникла необходимость в переходнике CAN-USB с гальваноразвязкой, оный и был разработан. Однако, все меня терзала совесть, что аж 48-ногий МК используется так тупо: просто. . .	Оттенки серого Argus19 18.03.2026 Оттенки серого Нашёл в интернете 3 прекрасных модуля: Модуль класса открытия диалога открытия/ сохранения файла на Win32 API; Модуль класса быстрого перекодирования цветного изображения в оттенки. . .	SDL3 для Desktop (MinGW): Рисуем цветные прямоугольники с помощью рисовальщика SDL3 на Си и C++ 8Observer8 17.03.2026 Содержание блога Финальные проекты на Си и на C++: finish-rectangles-sdl3-c. zip finish-rectangles-sdl3-cpp. zip	Символические и жёсткие ссылки в Linux. algri14 15.03.2026 Существует два типа ссылок — символические и жёсткие. Ссылка в Linux — это запись в каталоге, которая может указывать либо на inode «файла-ИСТОЧНИКА», тогда это будет «жёсткая ссылка» (hard link),. . .

@tankomaz ɐwʎ ɔ vǝmоɔ dиw ɐʚонɔ 443 / 442 / 100 Регистрация: 14.10.2012 Сообщений: 1,146 Записей в блоге: 9
	01.01.2014, 20:04
	1) увеличить время ожидания 2) ловить через try/catch и принимать решение что делать (либо в повторный вызов ставить, либо игнорировать если не принципиально) Добавлено через 1 минуту и такой вопрос, вы каждый элемент дергаете с повторным запросом? спарсите текст страницы в переменную, а уже потом его "штрудируйте" на куски 1

@turbanoff 4094 / 3828 / 745 Регистрация: 18.05.2010 Сообщений: 9,331 Записей в блоге: 12
	02.01.2014, 01:17
	таймут не означает, что каждый запрос будет выполняться столько. Это всего лишь лимит, после которого считается, что сервер недоступен. 1

@iaks 3 / 3 / 0 Регистрация: 29.11.2013 Сообщений: 89
	02.01.2014, 02:30 [ТС]
	Какой лучше выставить? Добавлено через 28 минут Решено... 0