|
5 / 5 / 0
Регистрация: 11.09.2021
Сообщений: 578
|
||||||||||||||||||||||||||||||||||||
Что лучше использовать обхода файлов папок: **Parallel.ForEach** или **async-await**?21.04.2024, 21:03. Показов 938. Ответов 12
Что лучше использовать обхода файлов папок: Parallel.ForEach или async-await?
В идеале я хотел бы получить список отсортированный как показано ниже. С минимальным усложнением кода. Ожидаемый вывод Кликните здесь для просмотра всего текста
Как формируются текущие выводы см. ниже Темы изучил, но не доходит... Запутался.. Темы: - Разница между асинхронным, многопоточным и параллельным программированиями - Как устроено синхронное и асинхронное чтение файлов? Main
Solut-1. Parallel.ForEach. Код кратко
Кликните здесь для просмотра всего текста
Вывод Solut-2 async-await Код кратко
Полный код Кликните здесь для просмотра всего текста
class DirectoryProcessor
class FileDirectoryProcessor GetFilesAndDirectoriesAsync(string rootDirectory)
Вывод Дерево папок
1
|
||||||||||||||||||||||||||||||||||||
| 21.04.2024, 21:03 | |
|
Ответы с готовыми решениями:
12
Parallel.ForEach & async Sockets
Получение данных из Parallel.For или Parallel.ForEach |
|
5 / 5 / 0
Регистрация: 11.09.2021
Сообщений: 578
|
||
| 22.04.2024, 11:37 [ТС] | ||
|
Solut-1-Parallel.ForEach - 204 milliseconds; Solut-2-async-await" - 162 milliseconds. Я думал может для работы с файлами/папками есть какие-то особенности... Или можно то и то применять? На усмотрение разработчика...
0
|
||
|
|
|
| 22.04.2024, 12:11 | |
|
dev3214, различия есть, но я думаю в вашем вопросе нет разницы, дело в том, что Parallel.ForEach позволяет выполнять задачи параллельно на нескольких потоках, но жрет ресурсы сильно, насколько я знаю. А async-await может выполнять долгие операции без блокировки потоков и жора ресурсов, опять же, ваш пример это ерунда, нужно намного более серьезные операции что бы это проверить
1
|
|
|
5 / 5 / 0
Регистрация: 11.09.2021
Сообщений: 578
|
||
| 22.04.2024, 12:35 [ТС] | ||
|
С различной степенью вложенности... Тогда применение Parallel.ForEach или async-await не принципиально?
0
|
||
|
1152 / 860 / 263
Регистрация: 30.04.2009
Сообщений: 3,603
|
|
| 22.04.2024, 12:40 | |
|
Дичь какая то. Есть встроенные методы делающие то же самое
Например https://learn.microsoft.com/en... archoption) Обрати внимание на параметр SearchOption. Нужно указать SearchOption.All для рекурсивного поиска.
2
|
|
|
4693 / 2701 / 734
Регистрация: 02.08.2011
Сообщений: 7,226
|
||
| 22.04.2024, 12:45 | ||
|
То есть они не торопятся повышать concurrency, а делают это осторожно. Как-то так. За полным ответом - надо лезть в исходники. Если верить отцам-основателям. Добавлено через 5 минут А правильный ответ выше дан - не надо ничего выдумывать, есть готовое API, которое проверено временем и работает оптимально, имхо.
1
|
||
|
5 / 5 / 0
Регистрация: 11.09.2021
Сообщений: 578
|
||||||||||||
| 22.04.2024, 13:42 [ТС] | ||||||||||||
|
А потом понеслась... Таски, асинки... Код кратко
Код из документации. Кликните здесь для просмотра всего текста
0
|
||||||||||||
|
14087 / 9305 / 1348
Регистрация: 21.01.2016
Сообщений: 34,944
|
||
| 22.04.2024, 16:42 | ||
|
dev3214, скорость доступа к накопителю на порядки ниже скорости работы процессора и оперативки. Это значит, что всякие попытки распараллеливания приведут ни к чему. Просто потоки будут делить между собой пропускную способность интерфейса SATA\PCI-E поровну.
Добавлено через 20 секунд
1
|
||
|
5 / 5 / 0
Регистрация: 11.09.2021
Сообщений: 578
|
|||||||
| 22.04.2024, 17:57 [ТС] | |||||||
|
По сути вопрос сводится к скорости заполнения списка. Parallel.ForEach не быстрее ForEach? Если я правильно понял, Parallel.ForEach по ядрам раскидывает.. ForEach не распределяет операции по ядрам? Если async-await не увеличивает скорость заполнения списка, то async-await нужно использовать чтобы не блокировать UI при больших объёмах. Так? Или не заморачиваться и просто сделать async-await чтобы не блокировать UI при работе?
0
|
|||||||
|
364 / 296 / 55
Регистрация: 08.04.2020
Сообщений: 1,173
|
||
| 22.04.2024, 18:26 | ||
|
dev3214, распараллеливать поиск файлов нет смысла, так как при большом поиске этого ничего не даст. Ведь когда вы достигните пика пропускной способности диска, быстрее читаться ничего не будет, а лишняя нагрузка избыточная появится. Используйте стандартные методы как описали выше или рекурсивный обход и запускайте вашу задачу асинхронно.
Также стоит учитывать что List и другие коллекции заполняют озу, при поиске в 40 миллионов можно достигнуть отметки 20гб озу съедено. Лучше на ходу делайте обработку данных, без заполнения озу без резкой причины. Добавлено через 51 секунду
1
|
||
|
14087 / 9305 / 1348
Регистрация: 21.01.2016
Сообщений: 34,944
|
|
| 23.04.2024, 05:19 | |
|
1
|
|
| 23.04.2024, 05:19 | |
|
Помогаю со студенческими работами здесь
13
Как использовать async и await
Как правильно использовать async await
Как использовать async/await в запросах SQL чтобы форма не зависала Искать еще темы с ответами Или воспользуйтесь поиском по форуму: |
|
Новые блоги и статьи
|
||||
|
PhpStorm 2025.3: WSL Terminal всегда стартует в ~
and_y87 14.12.2025
PhpStorm 2025. 3: WSL Terminal всегда стартует в ~ (home), игнорируя директорию проекта
Симптом:
После обновления до PhpStorm 2025. 3 встроенный терминал WSL открывается в домашней директории. . .
|
Access
VikBal 11.12.2025
Помогите пожалуйста !! Как объединить 2 одинаковые БД Access с разными данными.
|
Новый ноутбук
volvo 07.12.2025
Всем привет.
По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне:
Ryzen 5 7533HS
64 Gb DDR5
1Tb NVMe
16" Full HD Display
Win11 Pro
|
Музыка, написанная Искусственным Интеллектом
volvo 04.12.2025
Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .
|
От async/await к виртуальным потокам в Python
IndentationError 23.11.2025
Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .
|
|
Поиск "дружественных имён" СОМ портов
Argus19 22.11.2025
Поиск "дружественных имён" СОМ портов
На странице:
https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/
нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .
|
Сколько Государство потратило денег на меня, обеспечивая инсулином.
Programma_Boinc 20.11.2025
Сколько Государство потратило денег на меня, обеспечивая инсулином.
Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов.
. . .
|
Ломающие изменения в C#.NStar Alpha
Etyuhibosecyu 20.11.2025
Уже можно не только тестировать, но и пользоваться C#. NStar - писать оконные приложения, содержащие надписи, кнопки, текстовые поля и даже изображения, например, моя игра "Три в ряд" написана на этом. . .
|
Мысли в слух
kumehtar 18.11.2025
Кстати, совсем недавно имел разговор на тему медитаций с людьми. И обнаружил, что они вообще не понимают что такое медитация и зачем она нужна. Самые базовые вещи. Для них это - когда просто люди. . .
|
Создание Single Page Application на фреймах
krapotkin 16.11.2025
Статья исключительно для начинающих. Подходы оригинальностью не блещут.
В век Веб все очень привыкли к дизайну Single-Page-Application .
Быстренько разберем подход "на фреймах".
Мы делаем одну. . .
|