|
1 / 1 / 1
Регистрация: 14.03.2012
Сообщений: 16
|
||||||
Как использовать WebClient для параллельной загрузки страниц17.01.2015, 03:07. Показов 3185. Ответов 8
Метки нет (Все метки)
Время доброе.
Кто может подсказать, как использовать WebClient для параллельной загрузки страниц. При данном способе время выполнения примерно 25 минут. Если запустить одновременно 2 программы (в каждой закачивается только один сайт) то общее время выполнения 16 минут. И, судя по загруженности канала во втором случаи, трафик потребляется в 2 раза больше, чем в первом (5 Мбит/с против 10 Мбит/с)
0
|
||||||
| 17.01.2015, 03:07 | |
|
Ответы с готовыми решениями:
8
Как сделать класс для параллельной загрузки множества файлов из Интернет Асинхронный WebClient для параллельной закачки файлов со стартом нового после завершения одного из них Ссылки для скачивания с помощью WebClient.DownloadFile и WebClient.DownloadFileAsync |
|
Фрилансер
735 / 352 / 96
Регистрация: 05.05.2014
Сообщений: 2,621
|
||||||
| 17.01.2015, 03:30 | ||||||
|
попробуй вот так
2
|
||||||
|
Master of Orion
|
||||||
| 17.01.2015, 03:40 | ||||||
|
Я бы как-нибудь так писал:
0
|
||||||
|
|
||||||
| 17.01.2015, 08:51 | ||||||
|
А я как-то так бы сделал.
0
|
||||||
|
|
||
| 17.01.2015, 13:55 | ||
|
Так ведь?
0
|
||
|
Master of Orion
|
|
| 17.01.2015, 16:43 | |
|
insite2012, это можно изменить. Смысл в том, что у меня один HttpClient параллельно грузит столько, сколько нужно, в то время как webclient не поддерживает доступ из нескольких потоков
0
|
|
|
Фрилансер
735 / 352 / 96
Регистрация: 05.05.2014
Сообщений: 2,621
|
||||||
| 17.01.2015, 20:35 | ||||||
|
Psilon, можно вызвать webclient в другом потоке
1
|
||||||
|
Master of Orion
|
|
| 17.01.2015, 20:48 | |
|
pro_100_gram, сколько потоков - столько вебклиентов и нужно. А HttpClient достаточно создать 1 на любое количество потоков. Примущество очевидно.
0
|
|
| 17.01.2015, 20:48 | |
|
Помогаю со студенческими работами здесь
9
Отмена загрузки WebClient
Webclient.DownloadFileAcync ограничение скорости загрузки Ошибка при загрузки файла webClient.UploadFile Как оптимально сделать алгоритм параллельной загрузки и обработки веб-страниц Искать еще темы с ответами Или воспользуйтесь поиском по форуму: |
|
Новые блоги и статьи
|
|||
|
делаю науч статью по влиянию грибов на сукцессию
anaschu 13.03.2026
прикрепляю статью
|
SDL3 для Desktop (MinGW): Создаём пустое окно с нуля для 2D-графики на SDL3, Си и C++
8Observer8 10.03.2026
Содержание блога
Финальные проекты на Си и на C++:
hello-sdl3-c. zip
hello-sdl3-cpp. zip
Результат:
|
Установка CMake и MinGW 13.1 для сборки С и C++ приложений из консоли и из Qt Creator в EXE
8Observer8 10.03.2026
Содержание блога
MinGW - это коллекция инструментов для сборки приложений в EXE. CMake - это система сборки приложений. Здесь описаны базовые шаги для старта программирования с помощью CMake и. . .
|
Как дизайн сайта влияет на конверсию: 7 решений, которые реально повышают заявки
Neotwalker 08.03.2026
Многие до сих пор воспринимают дизайн сайта как “красивую оболочку”. На практике всё иначе: дизайн напрямую влияет на то, оставит человек заявку или уйдёт через несколько секунд.
Даже если у вас. . .
|
|
Модульная разработка через nuget packages
DevAlt 07.03.2026
Сложившийся в . Net-среде способ разработки чаще всего предполагает
монорепозиторий в котором находятся все исходники.
При создании нового решения, мы просто добавляем нужные проекты
и имеем. . .
|
Модульный подход на примере F#
DevAlt 06.03.2026
В блоге дяди Боба наткнулся на такое определение:
В этой книге («Подход, основанный на вариантах использования») Ивар утверждает,
что архитектура программного обеспечения — это
структуры,. . .
|
Управление камерой с помощью скрипта OrbitControls.js на Three.js: Вращение, зум и панорамирование
8Observer8 05.03.2026
Содержание блога
Финальная демка в браузере работает на Desktop и мобильных браузерах. Итоговый код: orbit-controls-threejs-js. zip. Сканируйте QR-код на мобильном. Вращайте камеру одним пальцем,. . .
|
SDL3 для Web (WebAssembly): Синхронизация спрайтов SDL3 и тел Box2D
8Observer8 04.03.2026
Содержание блога
Финальная демка в браузере. Итоговый код: finish-sync-physics-sprites-sdl3-c. zip
На первой гифке отладочные линии отключены, а на второй включены:. . .
|