Форум программистов, компьютерный форум, киберфорум
C# для начинающих
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.75/4: Рейтинг темы: голосов - 4, средняя оценка - 4.75
0 / 0 / 0
Регистрация: 30.04.2020
Сообщений: 4
.NET 4.x

Эффективный алгоритм для асинхронного копирования папки

30.04.2020, 10:34. Показов 922. Ответов 7

Студворк — интернет-сервис помощи студентам
Привет, друзья! Часть моего проекта отвечает за копирование каталогов из одного места в другое. Сначала рекурсивно получаю список файлов в папке (отбрасывая файлы с исключениями), затем с этим списком работаю.
Проблема состоит в производительности. Копировать файлы по одному неэффективно. Однако, если для каждого выделить поток (или Task), это тоже плохое решение, потому что:
1) Количество и размер файлов могут быть разными.
2) Если чтение/запись происходит в пределах одного ЖЕСТКОГО диска, то при слишком частом обращении в разные каталоги он будет физически не успевать и производительность уменьшится...
3) Если при копировании одного из файлов возникает исключение, то программа жестко зависает на несколько секунд (проверял)
4) Не знаю, насколько это полезный пункт... Но нагрузка на диск должна быть умеренной, чтобы другие приложения, использующие этот диск, могли безошибочно работать.

Нужен особый алгоритм, который будет совмещать синхронность и асинхронность. Например, находить какую-то зависимость между количеством и размером файлов, делить их на группы и др.

Ещё хотелось бы узнать, в какой коллекции хранить Task'и, чтобы копирование было производительным.

Наставьте меня на правильное решение, пожалуйста
0
cpp_developer
Эксперт
20123 / 5690 / 1417
Регистрация: 09.04.2010
Сообщений: 22,546
Блог
30.04.2020, 10:34
Ответы с готовыми решениями:

Эффективный алгоритм для задачи
Условия следующие: Даны n различных натуральных чисел и число m. Нужно выяснить, можно ли представить число m в виде произведения...

Эффективный алгоритм для поиска минимума в массиве
В массиве X(N) найти значения двух наименьших элементов и вывести их в порядке убывания. Гарантируется, что в массиве есть хотя бы два...

Наиболее эффективный алгоритм замещения для кэш-памяти большего объёма
Добрый день, интересует такой вопрос: Какой алгоритм замещения будет наиболее эффективным если применить кэш-память большего объёма? Спорим...

7
управление сложностью
 Аватар для Почтальон
1693 / 1306 / 259
Регистрация: 22.03.2015
Сообщений: 7,545
Записей в блоге: 5
30.04.2020, 10:50
Цитата Сообщение от yurik03 Посмотреть сообщение
Но нагрузка на диск должна быть умеренной, чтобы другие приложения, использующие этот диск, могли безошибочно работать.
Создайте фоновую службу с низким приоритетом исполнения.
0
0 / 0 / 0
Регистрация: 30.04.2020
Сообщений: 4
30.04.2020, 11:12  [ТС]
Цитата Сообщение от Почтальон Посмотреть сообщение
Создайте фоновую службу с низким приоритетом исполнения.
Спасибо, с этим я разберусь. Подскажите, пожалуйста, решение моей проблемы в целом.
0
управление сложностью
 Аватар для Почтальон
1693 / 1306 / 259
Регистрация: 22.03.2015
Сообщений: 7,545
Записей в блоге: 5
30.04.2020, 11:20
Цитата Сообщение от yurik03 Посмотреть сообщение
Подскажите, пожалуйста, решение моей проблемы в целом.
Вот как разберетесь со службой, так и решите свою проблему в целом.
0
0 / 0 / 0
Регистрация: 30.04.2020
Сообщений: 4
30.04.2020, 11:25  [ТС]
Цитата Сообщение от Почтальон Посмотреть сообщение
Вот как разберетесь со службой, так и решите свою проблему в целом.
Не думаю. Мне нужен конкретно алгоритм, или советы по созданию такого алгоритма. Четвертый пункт вообще, как я уже указал, не настолько важен.
0
управление сложностью
 Аватар для Почтальон
1693 / 1306 / 259
Регистрация: 22.03.2015
Сообщений: 7,545
Записей в блоге: 5
30.04.2020, 11:27
Если создать процесс с низким приоритетом, то работа остальных программ не должна нарушиться, но и производительность вашего приложения упадет. Как вариант - ставьте SSD
0
0 / 0 / 0
Регистрация: 30.04.2020
Сообщений: 4
30.04.2020, 11:33  [ТС]
Цитата Сообщение от Почтальон Посмотреть сообщение
Если создать процесс с низким приоритетом, то работа остальных программ не должна нарушиться, но и производительность вашего приложения упадет. Как вариант - ставьте SSD
Спасибо за совет про SSD, но моё приложение рассчитано для пользователей. А у них может быть как SSD, так и HDD. Главная цель - достигнуть высокой производительности.
0
управление сложностью
 Аватар для Почтальон
1693 / 1306 / 259
Регистрация: 22.03.2015
Сообщений: 7,545
Записей в блоге: 5
30.04.2020, 11:54
Цитата Сообщение от yurik03 Посмотреть сообщение
Главная цель - достигнуть высокой производительности.
Пишите на асме, это может дать значительную производительность, если будете просто менять адреса в файловой таблице.
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
raxper
Эксперт
30234 / 6612 / 1498
Регистрация: 28.12.2010
Сообщений: 21,154
Блог
30.04.2020, 11:54
Помогаю со студенческими работами здесь

Какой самый эффективный алгоритм для поиска одинаковых элементов в двух возрастающих массивах?
какой?

Скрипт для копирования папки
Друзья! Подскажите, пожалуйста, не могу понять в чем проблема. Задача: Подключить сетевой диск с другими учетными данными ...

Скрипт для копирования папки с настройками браузера
Нужен скрипт для копирования папки с настройками Яндекс браузера на Рабочий стол. Копировать нужно папку Default из...

Добавить в скрипт для копирования папки дополнительный функционал
Всем привет! Уважаемые форумчане! Требуется ваша помощь в дописании скрипта бэкапов.. Сейчас скрипт умеет копировать последнюю...

Скрипт для копирования папки с переименованием файлов внутри
Добрый вечер! Задача: есть папка-шаблон со сложной структурой: куча вложенных файлов, папок (в т.ч. пустые). В тех или иных названиях...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
8
Ответ Создать тему
Новые блоги и статьи
Автоматическое создание документа при проведении другого документа
Maks 29.03.2026
Реализация из решения ниже выполнена на нетиповых документах, разработанных в конфигурации КА2. Есть нетиповой документ "ЗаявкаНаРемонтСпецтехники" и нетиповой документ "ПланированиеСпецтехники". В. . .
Настройка движения справочника по регистру сведений
Maks 29.03.2026
Решение ниже реализовано на примере нетипового справочника "ТарифыМобильнойСвязи" разработанного в конфигурации КА2, с целью учета корпоративной мобильной связи в коммерческом предприятии. . . .
Автозаполнение реквизита при выборе элемента справочника
Maks 27.03.2026
Программный код из решения ниже на примере нетипового документа "ЗаявкаНаРемонтСпецтехники" разработанного в конфигурации КА2. При выборе "Спецтехники" (Тип Справочник. Спецтехника), заполняется. . .
Сумматор с применением элементов трёх состояний.
Hrethgir 26.03.2026
Тут. https:/ / fips. ru/ EGD/ ab3c85c8-836d-4866-871b-c2f0c5d77fbc Первый документ красиво выглядит, но без схемы. Это конечно не даёт никаких плюсов автору, но тем не менее. . . всё может быть. . .
Автозаполнение реквизитов при создании документа
Maks 26.03.2026
Программный код из решения ниже размещается в модуле объекта документа, в процедуре "ПриСозданииНаСервере". Алгоритм проверки заполнения реализован для исключения перезаписи значения реквизита,. . .
Команды формы и диалоговое окно
Maks 26.03.2026
1. Команда формы "ЗаполнитьЗапчасти". Программный код из решения ниже на примере нетипового документа "ЗаявкаНаРемонтСпецтехники" разработанного в конфигурации КА2. В качестве источника данных. . .
Кому нужен AOT?
DevAlt 26.03.2026
Решил сделать простой ланчер Написал заготовку: dotnet new console --aot -o UrlHandler var items = args. Split(":"); var tag = items; var id = items; var executable = args;. . .
Отправка уведомления на почту при создании или изменении элементов справочника
Maks 24.03.2026
Программная отправка письма электронной почты на примере типового справочника "Склады" в конфигурации БП3. Перед реализацией необходимо выполнить настройку системной учетной записи электронной. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru