Зависание recv при скачивании html

@Adonai · Регистрация: 23.07.2019

Студворк — интернет-сервис помощи студентам

Здравствуйте, пытаюсь порциями по 7000 Б скачать HTML страницу. Сначала все идет нормально, но в самом конце функция просто виснет на ~1 минуту. Страница скачивается полностью. Как убрать такое зависание?
Код функции, отвечающей за скачивание:

C
1
2
3
4
5
6
7
8
9
10
void read_r(int sock, char *buff)
{
    char *s = buff;
    int c;
    while ((c = recv(sock, s, 7000, 0))>0)
    {
        s+=c;
        printf("%d\n",c);
    }
}

@peter_irich · 29.06.2020, 21:20

Не знаю, как убрать, но вообще код нерациональный. Проще было бы так:

C
1
2
3
4
5
6
7
8
9
void read_r(int sock, char *buff)
{
   int n,ns = 0;
    while ((n = (int)recv(sock, buff + ns, 1024, 0))>0)
    {
        ns+=n;
        printf("%d\n",n);
    }
}

@Adonai · 29.06.2020, 21:44 **[ТС]**

Да, знаю, что нерациональный, я его из книги скопировал. Думал, вдруг это я что-то намудрил, вот и не работает. Но, видимо, это не я намудрил

@peter_irich · 29.06.2020, 22:51

Ещё для пробы можно сделать чтение неблокирующим через флаг, но не знаю, хорошо ли это будет.

Humanoid · 30.06.2020, 02:46

Есть разные способы:
1. В HTTP-запросе в заголовках указать "Connection: close", что бы сервер закрывал соединение после передачи файла.

2. Ожидайте столько данных, сколько нужно. Не надо запрягать recv() на 7000 байт, если заранее известно, что осталось принять 100 байт.
Размер можно узнать:
* размер файла сервер передаёт в заголовках (кажется, поле называется Content-Length).
* если сервер не знает размер (данные генерируются на ходу), а клиент указал протокол HTTP/1.0, то сервер после последнего байта разорвёт соединение (будет как во втором пункте с Connection: close).
* если сервер не знает размер, а протокол HTTP/1.1, то сервер передаёт данные блоками, а перед каждым блоком передаёт размер блока в виде 2 (кажется) байт.

3. Использовать неблокирующий сокет

C
1
fcntl(sock, F_SETFL, O_NONBLOCK);

И тогда recv() будет завершаться сразу и возвращать столько данных, сколько было получено. Но в этом случае надо будет обрабатывать ошибки EGAIN, которые будут возникать, когда нет данных, либо использовать select/poll/epoll, что бы ждать данные.

Кстати, размер 7000 какой-то странный. Если нет никаких особый требований, то лучше использовать степень двойки (1024, 2048, 4096, 8192 и т.п.).

Новые блоги и статьи Все статьи Все блоги /
SDL3 для Desktop (MinGW): Создаём пустое окно с нуля для 2D-графики на SDL3, Си и C++ 8Observer8 10.03.2026 Содержание блога Финальные проекты на Си и на C++: hello-sdl3-c. zip hello-sdl3-cpp. zip Результат:	Установка CMake и MinGW 13.1 для сборки С и C++ приложений из консоли и из Qt Creator в EXE 8Observer8 10.03.2026 Содержание блога MinGW - это коллекция инструментов для сборки приложений в EXE. CMake - это система сборки приложений. Здесь описаны базовые шаги для старта программирования с помощью CMake и. . .	Как дизайн сайта влияет на конверсию: 7 решений, которые реально повышают заявки Neotwalker 08.03.2026 Многие до сих пор воспринимают дизайн сайта как “красивую оболочку”. На практике всё иначе: дизайн напрямую влияет на то, оставит человек заявку или уйдёт через несколько секунд. Даже если у вас. . .	Модульная разработка через nuget packages DevAlt 07.03.2026 Сложившийся в . Net-среде способ разработки чаще всего предполагает монорепозиторий в котором находятся все исходники. При создании нового решения, мы просто добавляем нужные проекты и имеем. . .
Модульный подход на примере F# DevAlt 06.03.2026 В блоге дяди Боба наткнулся на такое определение: В этой книге («Подход, основанный на вариантах использования») Ивар утверждает, что архитектура программного обеспечения — это структуры,. . .	Управление камерой с помощью скрипта OrbitControls.js на Three.js: Вращение, зум и панорамирование 8Observer8 05.03.2026 Содержание блога Финальная демка в браузере работает на Desktop и мобильных браузерах. Итоговый код: orbit-controls-threejs-js. zip. Сканируйте QR-код на мобильном. Вращайте камеру одним пальцем,. . .	SDL3 для Web (WebAssembly): Синхронизация спрайтов SDL3 и тел Box2D 8Observer8 04.03.2026 Содержание блога Финальная демка в браузере. Итоговый код: finish-sync-physics-sprites-sdl3-c. zip На первой гифке отладочные линии отключены, а на второй включены:. . .	SDL3 для Web (WebAssembly): Идентификация объектов на Box2D v3 - использование userData и событий коллизий 8Observer8 02.03.2026 Содержание блога Финальная демка в браузере. Итоговый код: finish-collision-events-sdl3-c. zip Сканируйте QR-код на мобильном и вы увидите, что появится джойстик для управления главным героем. . . .

@Adonai 0 / 0 / 0 Регистрация: 23.07.2019 Сообщений: 21
	29.06.2020, 21:44 [ТС]
	Да, знаю, что нерациональный, я его из книги скопировал. Думал, вдруг это я что-то намудрил, вот и не работает. Но, видимо, это не я намудрил 0

@peter_irich 367 / 223 / 53 Регистрация: 18.10.2017 Сообщений: 2,380
	29.06.2020, 22:51
	Ещё для пробы можно сделать чтение неблокирующим через флаг, но не знаю, хорошо ли это будет. 0

Зависание recv при скачивании html

Решение