Многопоточная работа с БД, отправка данных, обновление. Есть ли готовые решения?

@Casper-SC · Регистрация: 27.03.2010

Студворк — интернет-сервис помощи студентам

Поток "1" читает данные, другие потоки берут из потока "1" и что-то делают. Если по какой-то причине поток "1" падает, то он сам восстанавливается и снова начинает читать данные.

Если поток "1" по какой-то причине прекратил работу досрочно, а приложение не получало команду на завершение работы (остановить службу Windows), то диспетчер потоков снова запускает поток "1", пусть по факту это другой поток, но главное, что работа не останавливается.

Если завершили работу, то все потоки корректно завершаются. То есть есть механизм отправки команды на завершение работы.

И возник у меня вопрос. А не подойдёт ли тут Akka.net? У меня очень мало времени на принятие решения, что я буду использовать. Я почитать-то почитаю, но вдруг мне тут подскажут сразу всё по полочкам. Будет отлично.

Да вот например. Я часть посмотрел, вроде эта штука может даже больше, чем мне нужно.

youtube

По факту, скорее всего, будет так:
Есть в БД 5 таблиц, будет работать несколько задач, например, 5, которые будут использовать 4 потока, чтобы читать и накапливать данные в кэш, из которого несколько других задач будут отправлять данные на другой сервер, а потом ещё апдейтить записи в таблицах. Вот такую штуку можно написать и руками, но хотелось бы заюзать что-то, что под подобные задачи заточено, что использовать будет явно лучше в плане того, что другие люди читающие код сразу вникнут в суть происходящего, ибо тоже знакомы с инструментом. В общем, мне не для целей обучения, так что нужно по максимому использовать готовые проверенные решения. Есть такие на примете?

@Usaga · 03.11.2017, 06:42

Casper-SC, я не уверен, что корректно понял вопрос. Вы хотите как-то обеспечить транзакционность задачи крутящейся в потоке? Или вас интересует как работать с СУБД в несколько потоков (что поддерживается СУБД из коробки)?

@Casper-SC · 03.11.2017, 08:09 **[ТС]**

Usaga, транзакционность. БД MS SQL Server, с ней всё более-менее понятно.

Интересует, что можно использовать для таких задач. Может есть какой-то фреймворк?

Мне просто неохота писать работу с потоками вида:
Запустить несколько потоков и следить, чтобы они при падении снова поднимались.
Писать механизмы их взаимодействия. Желательно бы чтобы можно было отправить сообщение из одной задачи и получить ответ в другой.

Такие дела интересуют.

@Usaga · 03.11.2017, 08:14

Casper-SC, такое только самому писать. Akka.net - шина сообщений, она только гарантирует доставку сообщений, но не может ручаться за то, что акторы (если на полпути рухнут) не оставят состояние приложения в некорретном виде.

Шина поможет обмениваться сообщениями, но следить за транзакционностью задачи в потоке вам придётся самостоятельно.

@VbGuest · 04.11.2017, 11:53

rabbitmq

@kenny69 · 05.11.2017, 01:43

Casper-SC, Глянь в сторону TPL Dataflow, может ты это ищешь.

Добавлено через 17 минут
Набросал как это примерно должно выглядеть

C#
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
class Program
    {
        static void Main(string[] args)
        {
            //описываем блоки обработки
            //в нем накапливаем данные
            var buffer = new BufferBlock<int>();
            //через brodcaster можем передавать одновременно в разные обработчики
            var brodcaster = new BroadcastBlock<int>(m => m);
           //обработчики поступающей информации
            var action1 = new ActionBlock<int>(m => Console.WriteLine(m * 2));
            var action2 = new ActionBlock<int>(m => Console.WriteLine(m + 1));
            var action3 = new ActionBlock<int>(m => Console.WriteLine(m - 1));
            var action4 = new ActionBlock<int>(m => Console.WriteLine(Math.Pow(m, 2)));
 
            //описываем цепочку обработки buffer->broadcaster->action1,2,3,4
            buffer.LinkTo(brodcaster);
            brodcaster.LinkTo(action1);
            brodcaster.LinkTo(action2, m => m % 2 == 0);//можно добавить условие передачи в узел
            brodcaster.LinkTo(action3);
            brodcaster.LinkTo(action4);
 
            //передаем данные в буфер и они по цепочке будут переходить дальше
            for (int i = 0; i < 10; i++)
            {
                buffer.Post(i);
                Thread.Sleep(1000);
                Console.WriteLine();
            }
 
            Console.ReadKey();
 
        }
    }

Добавлено через 2 минуты
Также можно настраивать их синхронность или асинхронность исполнения, количество потоков и т.д.

Новые блоги и статьи Все статьи Все блоги /
Советы по крайней бережливости. Внимание, это ОЧЕНЬ длинный пост. Programma_Boinc 28.12.2025 Советы по крайней бережливости. Внимание, это ОЧЕНЬ длинный пост. Налог на собак: https:/ / ********/ gallery/ V06K53e Финансовый отчет в Excel: https:/ / ********/ gallery/ bKBkQFf Пост отсюда. . .	Кто-нибудь знает, где можно бесплатно получить настольный компьютер или ноутбук? США. Programma_Boinc 26.12.2025 Нашел на реддите интересную статью под названием Anyone know where to get a free Desktop or Laptop? Ниже её машинный перевод. После долгих разбирательств я наконец-то вернула себе. . .	Thinkpad X220 Tablet — это лучший бюджетный ноутбук для учёбы, точка. Programma_Boinc 23.12.2025 Рецензия / Мнение/ Перевод Нашел на реддите интересную статью под названием The Thinkpad X220 Tablet is the best budget school laptop period . Ниже её машинный перевод. Thinkpad X220 Tablet —. . .	PhpStorm 2025.3: WSL Terminal всегда стартует в ~ and_y87 14.12.2025 PhpStorm 2025. 3: WSL Terminal всегда стартует в ~ (home), игнорируя директорию проекта Симптом: После обновления до PhpStorm 2025. 3 встроенный терминал WSL открывается в домашней директории. . .	Как объединить две одинаковые БД Access с разными данными VikBal 11.12.2025 Помогите пожалуйста !! Как объединить 2 одинаковые БД Access с разными данными.
Новый ноутбук volvo 07.12.2025 Всем привет. По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне: Ryzen 5 7533HS 64 Gb DDR5 1Tb NVMe 16" Full HD Display Win11 Pro	Музыка, написанная Искусственным Интеллектом volvo 04.12.2025 Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .	От async/await к виртуальным потокам в Python IndentationError 23.11.2025 Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .	Поиск "дружественных имён" СОМ портов Argus19 22.11.2025 Поиск "дружественных имён" СОМ портов На странице: https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/ нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .	Сколько Государство потратило денег на меня, обеспечивая инсулином. Programma_Boinc 20.11.2025 Сколько Государство потратило денег на меня, обеспечивая инсулином. Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов. . . .

@Casper-SC 4434 / 2094 / 404 Регистрация: 27.03.2010 Сообщений: 5,657 Записей в блоге: 1

	.NET 4.x Многопоточная работа с БД, отправка данных, обновление. Есть ли готовые решения? 02.11.2017, 21:59. Показов 1986. Ответов 5 Метки akka.net, thread, Задачи, потоки (Все метки) Поток "1" читает данные, другие потоки берут из потока "1" и что-то делают. Если по какой-то причине поток "1" падает, то он сам восстанавливается и снова начинает читать данные. Если поток "1" по какой-то причине прекратил работу досрочно, а приложение не получало команду на завершение работы (остановить службу Windows), то диспетчер потоков снова запускает поток "1", пусть по факту это другой поток, но главное, что работа не останавливается. Если завершили работу, то все потоки корректно завершаются. То есть есть механизм отправки команды на завершение работы. И возник у меня вопрос. А не подойдёт ли тут Akka.net? У меня очень мало времени на принятие решения, что я буду использовать. Я почитать-то почитаю, но вдруг мне тут подскажут сразу всё по полочкам. Будет отлично. Да вот например. Я часть посмотрел, вроде эта штука может даже больше, чем мне нужно. youtube По факту, скорее всего, будет так: Есть в БД 5 таблиц, будет работать несколько задач, например, 5, которые будут использовать 4 потока, чтобы читать и накапливать данные в кэш, из которого несколько других задач будут отправлять данные на другой сервер, а потом ещё апдейтить записи в таблицах. Вот такую штуку можно написать и руками, но хотелось бы заюзать что-то, что под подобные задачи заточено, что использовать будет явно лучше в плане того, что другие люди читающие код сразу вникнут в суть происходящего, ибо тоже знакомы с инструментом. В общем, мне не для целей обучения, так что нужно по максимому использовать готовые проверенные решения. Есть такие на примете? 0

@Usaga 14103 / 9320 / 1349 Регистрация: 21.01.2016 Сообщений: 35,001
	03.11.2017, 06:42
	Casper-SC, я не уверен, что корректно понял вопрос. Вы хотите как-то обеспечить транзакционность задачи крутящейся в потоке? Или вас интересует как работать с СУБД в несколько потоков (что поддерживается СУБД из коробки)? 0

@Casper-SC 4434 / 2094 / 404 Регистрация: 27.03.2010 Сообщений: 5,657 Записей в блоге: 1
	03.11.2017, 08:09 [ТС]
	Usaga, транзакционность. БД MS SQL Server, с ней всё более-менее понятно. Интересует, что можно использовать для таких задач. Может есть какой-то фреймворк? Мне просто неохота писать работу с потоками вида: Запустить несколько потоков и следить, чтобы они при падении снова поднимались. Писать механизмы их взаимодействия. Желательно бы чтобы можно было отправить сообщение из одной задачи и получить ответ в другой. Такие дела интересуют. 0

@Usaga 14103 / 9320 / 1349 Регистрация: 21.01.2016 Сообщений: 35,001
	03.11.2017, 08:14
	Casper-SC, такое только самому писать. Akka.net - шина сообщений, она только гарантирует доставку сообщений, но не может ручаться за то, что акторы (если на полпути рухнут) не оставят состояние приложения в некорретном виде. Шина поможет обмениваться сообщениями, но следить за транзакционностью задачи в потоке вам придётся самостоятельно. 1

@VbGuest 98 / 1 / 1 Регистрация: 28.01.2007 Сообщений: 53
	04.11.2017, 11:53
	rabbitmq 0