Форум программистов, компьютерный форум, киберфорум
C# для начинающих
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 5.00/15: Рейтинг темы: голосов - 15, средняя оценка - 5.00
4 / 4 / 2
Регистрация: 12.09.2013
Сообщений: 73

Скачать файл в несколько потоков

19.12.2017, 19:15. Показов 3315. Ответов 5
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Подскажите, пожалуйста, где ошибся в своих размышлениях насчет многопоточного скачивания:
1) получаем размер файла, разбиваем его на одинаковые куски;
2) для каждого из кусков создаем запрос на скачивание, указывая AddRange;
3) сохраняем каждый из потоков в собственный файл .tmp для дальнейшей обработки.

Основной код:

Кликните здесь для просмотра всего текста
C#
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
public void DownFile(String Url, String ResultFileName)
        {
            double nums = 4; //количество потоков
 
            HttpWebRequest wr = (HttpWebRequest)HttpWebRequest.Create(Url);
            HttpWebResponse ws = (HttpWebResponse)wr.GetResponse();
            Console.WriteLine(ws.ContentLength);
 
            int fileSize = Convert.ToInt32(ws.ContentLength);
 
            double part = Math.Floor(fileSize / nums);
            int partInt = Convert.ToInt32(part);
 
            for (int i = 0; i < nums; i++)
            {
                Console.WriteLine("step " + i);
                int start = i * partInt + i; //стартовая позиция байт
                int end = start + partInt; //конечная позиция
 
                string vars = Url + "\n" + ResultFileName + "." + i + ".tmp" + "\n" + fileSize + "\n" + partInt + "\n" + start + "\n" + end;
 
                Thread myThread = new Thread(ThreadDownFile);
                myThread.Start();
                ThreadDownFile(vars);
            }
        }



Сам поток:

Кликните здесь для просмотра всего текста
C#
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
static void ThreadDownFile(object args)
        {
            if (args != null)
            {
                string[] fileParams = args.ToString().Split('\n');
 
                string Url = fileParams[0];
                string ResultFileName = fileParams[1];
 
                int start = Convert.ToInt32(fileParams[4]);
                int end = Convert.ToInt32(fileParams[5]);
                
                HttpWebRequest request = (HttpWebRequest)HttpWebRequest.Create(Url);
                request.AddRange(start, end);
 
                HttpWebResponse response = (HttpWebResponse)request.GetResponse();
 
                Stream str = response.GetResponseStream();
 
                int newByte = 262144;
                byte[] inBuf = new byte[newByte];
                int bytesReadTotal = 0;
 
                FileStream fstr = new FileStream(ResultFileName, FileMode.Create, FileAccess.Write);
 
                while (true)
                {
                    int n = str.Read(inBuf, 0, newByte);
                    if (n <= 0)
                    {
                        break;
                    }
 
                    fstr.Write(inBuf, 0, n);
 
                    bytesReadTotal += n;
                    Console.WriteLine(bytesReadTotal);
                }
 
                str.Close();
                fstr.Close();
            }
        }


Проблема в том, что потоки работают последовательно: второй после первого, третий после второго и т.д. Что я не усвоил из теории?

P.S. Пробовал вручную создавать потоки myThread1 и myThread2, указывая параметры не в цикле, но проблема та же.
0
IT_Exp
Эксперт
34794 / 4073 / 2104
Регистрация: 17.06.2006
Сообщений: 32,602
Блог
19.12.2017, 19:15
Ответы с готовыми решениями:

Чтение информации из файл в несколько потоков.
Нужно прочитать построчно текст из файла и передать в функцию которая выполняется в другом потоке. string domain; ...

Несколько асинхронных потоков
Здравствуйте. listener.BeginAcceptTcpClient( new AsyncCallback(ListnerPort), ...

Функция в несколько потоков
Здравствуйте! У меня есть функция. Но как бы я ее не оптимизировал скорости прибавления не много. Хотелось бы чтобы эта функция...

5
907 / 664 / 318
Регистрация: 23.10.2016
Сообщений: 1,543
19.12.2017, 19:54
24-я строка, зачем она?

Добавлено через 4 минуты
Ну и в 23-й надо что-то в метод Start передать

Добавлено через 51 секунду
А вот это что? Выдавало ошибку, решили заглушку поставить?
C#
1
           if (args != null)
0
4 / 4 / 2
Регистрация: 12.09.2013
Сообщений: 73
19.12.2017, 21:30  [ТС]
Не вижу возможности редактировать сообщение, видимо, после добавления ответа, это уже не представляется возможным.
По сути.
24-я строка не нужна, накосячил.
В srart передал переменную, работает.
Заглушка стояла из-за косяка, связанным с 24-й строкой .

Теперь последние строки выглядят так:

C#
1
2
3
4
............
                Thread myThread = new Thread(new ParameterizedThreadStart(ThreadDownFile));
                myThread.Start(vars);
            }
В общем-то, все работает, но с одной оговоркой: потоки (как и ожидалось) после 0-го запускаются в случайном порядке, однако работают все равно до конца. Например, если запустился 0-й, то 2-й запускается только после того, как отработает 0-й, 1-й - после того, как отработает 2-й и т.д.
При этом, если не увеличить Timeout для HttpWebRequest, то какой-нибудь поток вылетает, пока ждет ответа HttpWebResponse.

В общем, я не достиг, чего хотел - одновременный поток один, просто файл качается заданными мной частями.
0
907 / 664 / 318
Регистрация: 23.10.2016
Сообщений: 1,543
19.12.2017, 22:07
Цитата Сообщение от dapol Посмотреть сообщение
одновременный поток один,
Вроде два должно быть
https://msdn.microsoft.com/ru-... .110).aspx
0
4 / 4 / 2
Регистрация: 12.09.2013
Сообщений: 73
20.12.2017, 12:02  [ТС]
Я имею ввиду поток myThread. В переменную передаю i, генерируемое циклом, в консоль вывожу номер потока:
C#
1
Console.WriteLine("Поток: " + threadNum + " прочитано: " + bytesReadTotal); // threadNum = i
0
907 / 664 / 318
Регистрация: 23.10.2016
Сообщений: 1,543
21.12.2017, 19:47
dapol, покажите, что выводит ваша программа на консоль
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
BasicMan
Эксперт
29316 / 5623 / 2384
Регистрация: 17.02.2009
Сообщений: 30,364
Блог
21.12.2017, 19:47
Помогаю со студенческими работами здесь

Прервать несколько потоков
Доброго времени суток уважаемые! Подскажите пожалуйста, как правильно решить следующую задачу: выполнить некоторый метод в разных, не...

Разбить цикл на несколько потоков
Добрый день! Есть известный int N=10000, необходимо создать несколько потоков с циклами (for int x=0; x&lt;N;x++) { ...

Получение WebResponce'ов в несколько потоков
Есть некое приложение, которое берет из очереди данные, которые надо проверить в интернете. Выглядит это примерно так: public...

Несколько потоков работают с ошибкой
Всем привет. Бьюсь над мультипоточностью уже вторые сутки. Заранее прошу меня извинить, описать проблему без приведения своего...

Создать и запустить одновременно несколько потоков
Всем привет) Необходимо создать несколько потоков и запустить их одновременно (без помощи циклов). Как это сделать? Помогите...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
6
Ответ Создать тему
Новые блоги и статьи
Модульная разработка через nuget packages
DevAlt 07.03.2026
Сложившийся в . Net-среде способ разработки чаще всего предполагает монорепозиторий в котором находятся все исходники. При создании нового решения, мы просто добавляем нужные проекты и имеем. . .
Модульный подход на примере F#
DevAlt 06.03.2026
В блоге дяди Боба наткнулся на такое определение: В этой книге («Подход, основанный на вариантах использования») Ивар утверждает, что архитектура программного обеспечения — это структуры,. . .
Управление камерой с помощью скрипта OrbitControls.js на Three.js: Вращение, зум и панорамирование
8Observer8 05.03.2026
Содержание блога Финальная демка в браузере работает на Desktop и мобильных браузерах. Итоговый код: orbit-controls-threejs-js. zip. Сканируйте QR-код на мобильном. Вращайте камеру одним пальцем,. . .
SDL3 для Web (WebAssembly): Синхронизация спрайтов SDL3 и тел Box2D
8Observer8 04.03.2026
Содержание блога Финальная демка в браузере. Итоговый код: finish-sync-physics-sprites-sdl3-c. zip На первой гифке отладочные линии отключены, а на второй включены:. . .
SDL3 для Web (WebAssembly): Идентификация объектов на Box2D v3 - использование userData и событий коллизий
8Observer8 02.03.2026
Содержание блога Финальная демка в браузере. Итоговый код: finish-collision-events-sdl3-c. zip Сканируйте QR-код на мобильном и вы увидите, что появится джойстик для управления главным героем. . . .
Реалии
Hrethgir 01.03.2026
Нет, я не закончил до сих пор симулятор. Эта задача сложнее. Не получилось уйти в плавсостав, но оно и к лучшему, возможно. Точнее получалось - но сварщиком в палубную команду, а это значит, в моём. . .
Ритм жизни
kumehtar 27.02.2026
Иногда приходится жить в ритме, где дел становится всё больше, а вовлечения в происходящее — всё меньше. Плотный график не даёт вниманию закрепиться ни на одном событии. Утро начинается с быстрых,. . .
SDL3 для Web (WebAssembly): Сборка библиотек: SDL3, Box2D, FreeType, SDL3_ttf, SDL3_mixer и SDL3_image из исходников с помощью CMake и Emscripten
8Observer8 27.02.2026
Недавно вышла версия 3. 4. 2 библиотеки SDL3. На странице официальной релиза доступны исходники, готовые DLL (для x86, x64, arm64), а также библиотеки для разработки под Android, MinGW и Visual Studio. . . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru