Различия в скоростях между curl и libcurl

@admsasha · Регистрация: 11.06.2011

Студворк — интернет-сервис помощи студентам

Качаю определенный файл через curl
curl -O http://myhost.ru/myfile.txt

Потом качаю через свою утилиту.

C++
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
#include <stdio.h>
#include <curl/curl.h>
#include <string>
 
int main(void) {
    CURL *curl;
    FILE *fp;
    CURLcode res;
    char *url = "http://myhost.ru/myfile.txt";
    char outfilename[FILENAME_MAX] = "test.txt";
    curl = curl_easy_init();
    if (curl) {
        fp = fopen(outfilename,"wb");
        curl_easy_setopt(curl, CURLOPT_URL, url);
        curl_easy_setopt(curl, CURLOPT_WRITEDATA, fp);
        curl_easy_setopt(curl, CURLOPT_NOPROGRESS, 0L);
        res = curl_easy_perform(curl);
        curl_easy_cleanup(curl);
        fclose(fp);
    }
    return 0;
}

Скоростя скачивания отличаются в разы. Утилита curl всегда качает быстрее. Что нужно добавить в программе, чтобы достичь хорошей скорости ?

@Renji · 14.04.2016, 08:57

Сообщение от admsasha

Что нужно добавить в программе, чтобы достичь хорошей скорости ?

Для начала попробовать поставить свою CURLOPT_WRITEFUNCTION, с агрессивной буферизацией, чтоб сначала весь файл в память, а потом на диск одним куском. А то, может, у вас большие потери на куче системных вызовов записывающих по одному байту.

@admsasha · 14.04.2016, 09:47 **[ТС]**

Сделал такую заглушку

C++
1
2
3
static size_t WriteCallback(void *ptr, size_t size, size_t nmemb, void *data){
  return (size_t)(size * nmemb);
}

Поставил

C++
1
curl_easy_setopt(curl, CURLOPT_WRITEFUNCTION, WriteCallback);

Разница если и есть, то минимальна.

Новые блоги и статьи Все статьи Все блоги /
Как дизайн сайта влияет на конверсию: 7 решений, которые реально повышают заявки Neotwalker 08.03.2026 Многие до сих пор воспринимают дизайн сайта как “красивую оболочку”. На практике всё иначе: дизайн напрямую влияет на то, оставит человек заявку или уйдёт через несколько секунд. Даже если у вас. . .	Модульная разработка через nuget packages DevAlt 07.03.2026 Сложившийся в . Net-среде способ разработки чаще всего предполагает монорепозиторий в котором находятся все исходники. При создании нового решения, мы просто добавляем нужные проекты и имеем. . .	Модульный подход на примере F# DevAlt 06.03.2026 В блоге дяди Боба наткнулся на такое определение: В этой книге («Подход, основанный на вариантах использования») Ивар утверждает, что архитектура программного обеспечения — это структуры,. . .	Управление камерой с помощью скрипта OrbitControls.js на Three.js: Вращение, зум и панорамирование 8Observer8 05.03.2026 Содержание блога Финальная демка в браузере работает на Desktop и мобильных браузерах. Итоговый код: orbit-controls-threejs-js. zip. Сканируйте QR-код на мобильном. Вращайте камеру одним пальцем,. . .
SDL3 для Web (WebAssembly): Синхронизация спрайтов SDL3 и тел Box2D 8Observer8 04.03.2026 Содержание блога Финальная демка в браузере. Итоговый код: finish-sync-physics-sprites-sdl3-c. zip На первой гифке отладочные линии отключены, а на второй включены:. . .	SDL3 для Web (WebAssembly): Идентификация объектов на Box2D v3 - использование userData и событий коллизий 8Observer8 02.03.2026 Содержание блога Финальная демка в браузере. Итоговый код: finish-collision-events-sdl3-c. zip Сканируйте QR-код на мобильном и вы увидите, что появится джойстик для управления главным героем. . . .	Реалии Hrethgir 01.03.2026 Нет, я не закончил до сих пор симулятор. Эта задача сложнее. Не получилось уйти в плавсостав, но оно и к лучшему, возможно. Точнее получалось - но сварщиком в палубную команду, а это значит, в моём. . .	Ритм жизни kumehtar 27.02.2026 Иногда приходится жить в ритме, где дел становится всё больше, а вовлечения в происходящее — всё меньше. Плотный график не даёт вниманию закрепиться ни на одном событии. Утро начинается с быстрых,. . .