Что такое java.net.SocketTimeoutException: ?

@iaks · Регистрация: 29.11.2013

Студворк — интернет-сервис помощи студентам

При парсинге сайта, когда выбрал уже две трети от нужных информации NetBeans выдает следующее

Java
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
Exception in thread "main" java.net.SocketTimeoutException: Read timed out
    at java.net.SocketInputStream.socketRead0(Native Method)
    at java.net.SocketInputStream.read(SocketInputStream.java:152)
    at java.net.SocketInputStream.read(SocketInputStream.java:122)
    at java.io.BufferedInputStream.fill(BufferedInputStream.java:235)
    at java.io.BufferedInputStream.read1(BufferedInputStream.java:275)
    at java.io.BufferedInputStream.read(BufferedInputStream.java:334)
    at sun.net.[url]www.http.HttpClient.parseHTTPHeader(HttpClient.java:687[/url])
    at sun.net.[url]www.http.HttpClient.parseHTTP(HttpClient.java:633[/url])
    at sun.net.[url]www.protocol.http.HttpURLConnection.getInputStream(HttpURLConnection.java:1323[/url])
    at java.net.HttpURLConnection.getResponseCode(HttpURLConnection.java:468)
    at org.jsoup.helper.HttpConnection$Response.execute(HttpConnection.java:443)
    at org.jsoup.helper.HttpConnection$Response.execute(HttpConnection.java:424)
    at org.jsoup.helper.HttpConnection.execute(HttpConnection.java:178)
    at org.jsoup.helper.HttpConnection.get(HttpConnection.java:167)
    at parser.main(parser.java:62)
Java Result: 1
СБОРКА УСПЕШНО ЗАВЕРШЕНА (общее время: 9 минуты 22 секунды)

В чем может быть затык и как его обойти?

@tankomaz · 01.01.2014, 20:04

1) увеличить время ожидания
2) ловить через try/catch и принимать решение что делать (либо в повторный вызов ставить, либо игнорировать если не принципиально)

Добавлено через 1 минуту
и такой вопрос, вы каждый элемент дергаете с повторным запросом? спарсите текст страницы в переменную, а уже потом его "штрудируйте" на куски

@iaks · 01.01.2014, 23:43 **[ТС]**

tankomaz, мои вопросы позвольте задать пару нубских вопросов..
1. Как увеличить время ожидания
2. Где лучше почитать про try/catch, так сказать для начинающих?

3. Вроде так и делаю, правда собираю данные в цикле с примерно 5000 страниц

Java
1
2
3
4
// получаю страницу в цикле (их примерно 5000)
doc3 = Jsoup.connect(ХHref).get();
// получаю нужные элементы
Elements link = doc3.getElementsByClass("tolink");

Или все же не так?

Добавлено через 18 минут
Про задержку вроде нашел

Java
1
doc3 = Jsoup.connect(ХHref).timeout(10*1000).get();

Но, если это применить ко всем страницам, то времени для парсинга потребуется...
5000 * 10/60/60 = 13,9 часов

Жесть...
Будет ли эффективней использовать try/catch?

@turbanoff · 02.01.2014, 01:17

таймут не означает, что каждый запрос будет выполняться столько.
Это всего лишь лимит, после которого считается, что сервер недоступен.

@iaks · 02.01.2014, 02:30 **[ТС]**

Какой лучше выставить?

Добавлено через 28 минут
Решено...

Новые блоги и статьи Все статьи Все блоги /
SDL3 для Web (WebAssembly): сборка C/C++ проекта из консоли 8Observer8 30.01.2026 Содержание блога Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .	Установка Emscripten SDK (emsdk) и CMake на Windows для сборки C и C++ приложений в WebAssembly (Wasm) 8Observer8 30.01.2026 Чтобы скачать Emscripten SDK (emsdk) необходимо сначало скачать и уставить Git: Install for Windows. Следуйте стандартной процедуре установки Git через установщик. Система контроля версиями Git. . .	Подключение Box2D v3 к SDL3 для Android: физика и отрисовка коллайдеров 8Observer8 29.01.2026 Содержание блога Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами. Версия v3 была полностью переписана на Си, в. . .	Инструменты COM: Сохранение данный из VARIANT в файл и загрузка из файла в VARIANT bedvit 28.01.2026 Сохранение базовых типов COM и массивов (одномерных или двухмерных) любой вложенности (деревья) в файл, с возможностью выбора алгоритмов сжатия и шифрования. Часть библиотеки BedvitCOM Использованы. . .
Загрузка PNG с альфа-каналом на SDL3 для Android: с помощью SDL_LoadPNG (без SDL3_image) 8Observer8 28.01.2026 Содержание блога SDL3 имеет собственные средства для загрузки и отображения PNG-файлов с альфа-каналом и базовой работы с ними. В этой инструкции используется функция SDL_LoadPNG(), которая. . .	Загрузка PNG с альфа-каналом на SDL3 для Android: с помощью SDL3_image 8Observer8 27.01.2026 Содержание блога SDL3_image - это библиотека для загрузки и работы с изображениями. Эта пошаговая инструкция покажет, как загрузить и вывести на экран смартфона картинку с альфа-каналом, то есть с. . .	Влияние грибов на сукцессию anaschu 26.01.2026 Бифуркационные изменения массы гриба происходят тогда, когда мы уменьшаем массу компоста в 10 раз, а скорость прироста биомассы уменьшаем в три раза. Скорость прироста биомассы может уменьшаться за. . .	Воспроизведение звукового файла с помощью SDL3_mixer при касании экрана Android 8Observer8 26.01.2026 Содержание блога SDL3_mixer - это библиотека я для воспроизведения аудио. В отличие от инструкции по добавлению текста код по проигрыванию звука уже содержится в шаблоне примера. Нужно только. . .

@tankomaz ɐwʎ ɔ vǝmоɔ dиw ɐʚонɔ 443 / 442 / 100 Регистрация: 14.10.2012 Сообщений: 1,146 Записей в блоге: 9
	01.01.2014, 20:04
	1) увеличить время ожидания 2) ловить через try/catch и принимать решение что делать (либо в повторный вызов ставить, либо игнорировать если не принципиально) Добавлено через 1 минуту и такой вопрос, вы каждый элемент дергаете с повторным запросом? спарсите текст страницы в переменную, а уже потом его "штрудируйте" на куски 1

@turbanoff 4094 / 3828 / 745 Регистрация: 18.05.2010 Сообщений: 9,331 Записей в блоге: 12
	02.01.2014, 01:17
	таймут не означает, что каждый запрос будет выполняться столько. Это всего лишь лимит, после которого считается, что сервер недоступен. 1

@iaks 3 / 3 / 0 Регистрация: 29.11.2013 Сообщений: 89
	02.01.2014, 02:30 [ТС]
	Какой лучше выставить? Добавлено через 28 минут Решено... 0