Форум программистов, компьютерный форум, киберфорум
C# .NET
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 5.00/5: Рейтинг темы: голосов - 5, средняя оценка - 5.00
0 / 0 / 0
Регистрация: 12.09.2017
Сообщений: 36

Фоновый/асинхронный метод

22.06.2018, 20:55. Показов 969. Ответов 3
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Моя программа делает следующее:

программа делит файл на части, затем с созданными частями производятся действия, после завершения действия часть файла с которой производилось действие удаляется. В данный момент у меня это выполняется синхронно, то есть появляется новая часть -> с ней выполняются действия -> часть удаляется -> появляется новая часть -> итд.

Хотелось бы чтобы был метод, который работает параллельно, при нахождении в папке новой части он будет ее обрабатывать. И при этом, исходный файл продолжал дальше разделяться на части, то есть выполнять это асинхронно.

Для этой задумки мне нужно создать метод, который будет искать новые части и и обрабатывать их асинхронно то есть, пока он обрабатывает часть файла, исходный файл продолжает разделяться на части.

Мне нужен только пример такого метода, дальше у меня уже есть отлаженный алгоритм. Помогите примером такого метода и его правильным стартом
0
Programming
Эксперт
39485 / 9562 / 3019
Регистрация: 12.04.2006
Сообщений: 41,671
Блог
22.06.2018, 20:55
Ответы с готовыми решениями:

Асинхронный метод + потоки
Всем привет! Возможно вопрос и дилетантский, поэтому заранее извиняюсь. Делаю парсер сайта, на сайте есть несколько разделов. Использую...

Асинхронный метод долго (никогда?) не завершается
Добрый день. Вызываю асинхронный метод вот так: StockOrderInfo info; info.account = ""; ...

Программа не дожидается, пока выполнится асинхронный метод
У меня есть два метода: public async static Task Challenge() //Авторизация в системе { string accessKey =...

3
TheGreatCornholio
 Аватар для Woldemar89
1255 / 733 / 285
Регистрация: 30.07.2015
Сообщений: 2,408
22.06.2018, 21:20
Узкое место здесь, разумеется, жесткий диск, пытаться читать с него параллельно - бесполезно(ну это насколько я знаю).
Проанализируйте сначала потребление памяти и скорость обработки отдельной части (в плане того, чтобы не перегружать RAM имея 5х1ГБ частей в асинхронно-параллельной обработке например).
Лучше всего, будет прочитать чанк (100-500мб например), начать обработать его в несколько потоков, асинхронно\параллельно читая следующий, итд, используя ограничение на потребление RAM,
если вдруг процедура обработки чанка на пару порядков дольше процедуры его чтения.
0
0 / 0 / 0
Регистрация: 12.09.2017
Сообщений: 36
22.06.2018, 21:44  [ТС]
Woldemar89, я использую SSD nvme, и в моем случае диск не является узким местом. Озу является узким местом на моем пк всего 12гб. Файлы которые весят больше приводят к зависанию пк. Я решил эту проблему проверяя доступную озу на данный момент.

Например если осталось меньше 1.5 гб я просто дожидаюсь пока она снова станет доступной.
C#
1
2
3
4
5
PerformanceCounter ramFree = new PerformanceCounter("Memory", "Available MBytes");
Console.WriteLine(ramFree.RawValue + "MB");
if (ramFree.RawValue / 3 > 1500)
{
}
Добавлено через 5 минут
Woldemar89,
С помощью потоков делю следующим образом
C#
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
public void MultiThreadSplitFile()
        {
            for (int i = 0; i < countOfParts; i++)
            {
                thread = new Thread(CreateFileParts);
                thread.Name = "Thread - " + thread.ManagedThreadId;
                thread.Start(i);
                Console.WriteLine("Start: " + thread.Name);
                handle.WaitOne();
            }
        }
 
void CreateFileParts(object i)
        {
            try
            {
                using (FileStream fsRead = new FileStream(fileName, FileMode.Open, FileAccess.Read))
                {
                    fsRead.Position = (int)i * sizeOnePart;
                    using (FileStream fsWrite = new FileStream(pathToFolder + $"{i}_{fileName}", FileMode.Create, FileAccess.Write))
                    {
                        if ((int)i == countOfParts - 1)
                        {
                            byte[] buffer = new byte[sizeLastPart];
                            fsRead.Read(buffer, 0, buffer.Length);
                            fsWrite.Write(buffer, 0, buffer.Length);
                        }
                        else
                        {
                            byte[] buffer = new byte[sizeOnePart];
                            fsRead.Read(buffer, 0, buffer.Length);
                            fsWrite.Write(buffer, 0, buffer.Length);
                        }
                    }
                }
                handle.Set();
            }
            catch (Exception ex)
            {
                Console.WriteLine("error " + ex.Message);
            }
        }
0
TheGreatCornholio
 Аватар для Woldemar89
1255 / 733 / 285
Регистрация: 30.07.2015
Сообщений: 2,408
22.06.2018, 22:04
Цитата Сообщение от retah Посмотреть сообщение
я использую SSD nvme
Допустим, NVME PCI-E поддерживает (вроде да, а SATA - нет) параллельные каналы ввода\вывода (и файловая система, драйвера и ОС тоже должны, чтобы это работало).
В таком случае имеет смысл использовать обычный Parallel.ForEach с MaxDegreeOfParallelism подсчитанный под размер RAM, размера чанков и их количества я думаю.

Добавлено через 3 минуты
пс. Thread - устаревшая хрень, лучше Task с async\await.
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
inter-admin
Эксперт
29715 / 6470 / 2152
Регистрация: 06.03.2009
Сообщений: 28,500
Блог
22.06.2018, 22:04
Помогаю со студенческими работами здесь

Socket.Send + Async & Await: свой асинхронный метод отправки данных
Привет. Хочу написать свой асинх. метод для отправки данных при помощи класса Socket и его метода Send. Работать должно так. Есть некий...

Фоновый рисунок
У меня такой вопрос, как в собствеено написаной программе, рисунок сделать в фоновом изображении рабочего стола? кто-нибудь помогите? Если...

Основной и фоновый процесс
Есть основной процесс, который работает в интерфейсе программы (WinForms), и есть фоновый BackgroundWorker. Как фоновый процесс может дать...

Фоновый режим, работа с клавиатурой
Добрый день. Подскажите пожалуйста... Такая вот задача, сделать фоновую программу. К примеру, когда нажимаю Alt+V печатается строчка...

Асинхронный сервер
всем привет. У меня есть асинхронный сервер, который получает данные следующим образом: private void OnRecieved(IAsyncResult ar) { ...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
4
Ответ Создать тему
Новые блоги и статьи
Первый деплой
lagorue 16.01.2026
Не спеша развернул своё 1ое приложение в kubernetes. А дальше мне интересно создать 1фронтэнд приложения и 2 бэкэнд приложения развернуть 2 деплоя в кубере получится 2 сервиса и что-бы они. . .
Расчёт переходных процессов в цепи постоянного тока
igorrr37 16.01.2026
/ * Дана цепь постоянного тока с R, L, C, k(ключ), U, E, J. Программа составляет систему уравнений по 1 и 2 законам Кирхгофа, решает её и находит токи на L и напряжения на C в установ. режимах до и. . .
Восстановить юзерскрипты Greasemonkey из бэкапа браузера
damix 15.01.2026
Если восстановить из бэкапа профиль Firefox после переустановки винды, то список юзерскриптов в Greasemonkey будет пустым. Но восстановить их можно так. Для этого понадобится консольная утилита. . .
Изучаю kubernetes
lagorue 13.01.2026
А пригодятся-ли мне знания kubernetes в России?
Сукцессия микоризы: основная теория в виде двух уравнений.
anaschu 11.01.2026
https:/ / rutube. ru/ video/ 7a537f578d808e67a3c6fd818a44a5c4/
WordPad для Windows 11
Jel 10.01.2026
WordPad для Windows 11 — это приложение, которое восстанавливает классический текстовый редактор WordPad в операционной системе Windows 11. После того как Microsoft исключила WordPad из. . .
Classic Notepad for Windows 11
Jel 10.01.2026
Old Classic Notepad for Windows 11 Приложение для Windows 11, позволяющее пользователям вернуть классическую версию текстового редактора «Блокнот» из Windows 10. Программа предоставляет более. . .
Почему дизайн решает?
Neotwalker 09.01.2026
В современном мире, где конкуренция за внимание потребителя достигла пика, дизайн становится мощным инструментом для успеха бренда. Это не просто красивый внешний вид продукта или сайта — это. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru