|
0 / 0 / 0
Регистрация: 28.08.2014
Сообщений: 11
|
|
Потоки или процессы для многочисленных сессий04.02.2022, 01:49. Показов 496. Ответов 1
Доброго времени суток!
Есть необходимость в целях создания нагрузки (сетевая активность определенного рода) запускать множество несложных однотипных заданий в количестве нескольких тысяч и возможно даже десятков тысяч. Необходимо чтобы эти задания обрабатывались насколько возможно единовременно, создавая равномерную нагрузку. В связи с этим возник вопрос - что лучше использовать для данной цели? multiprocessing или же threading? Спрашиваю ещё и потому, что до этого имел опыт использования subprocess и эти тысячи запущенных внешних программ легли тяжким бременем на операционную систему, которая оказалась не в состоянии переварить такое количество процессов. Возможно данный вопрос поставлен некорректно, но так уж вышло исходя из моего текущего уровня понимания. Добавлено через 1 час 30 минут Забыл уточнить важный момент - эти задачи должны выполняться на протяжении неопределенно длительного промежутка времени - часы, возможно до суток. Мне важно обеспечить если можно так выразиться "оптимальное исполнение". Важно чтобы все таски выполнялись насколько возможно равномерно. Сами по себе они достаточно легковесные, но их очень много.
0
|
|
| 04.02.2022, 01:49 | |
|
Ответы с готовыми решениями:
1
3.7 Процессы или потоки ? Потоки и процессы C++ Процессы и потоки |
|
155 / 120 / 38
Регистрация: 12.12.2013
Сообщений: 374
|
|
| 05.02.2022, 14:42 | |
|
Насколько я понимаю, в multiprocessing/subprocess для каждого процесса будет запускаться интерпретатор Python, поэтому можно завалить систему таким количеством процессов.
Имхо, лучше потоки использовать с одним интерпретатором, а еще лучше попробовать асинхронный код. Но насколько они будут хорошо с большим количеством запросов работать не могу сказать.
1
|
|
| 05.02.2022, 14:42 | |
|
Помогаю со студенческими работами здесь
2
Процессы и потоки процессы и потоки!
Потоки и процессы Искать еще темы с ответами Или воспользуйтесь поиском по форуму: |
|
Новые блоги и статьи
|
|||
|
SDL3 для Web (WebAssembly): Обработчик клика мыши в браузере ПК и касания экрана в браузере на мобильном устройстве
8Observer8 02.02.2026
Содержание блога
Для начала пошагово создадим рабочий пример для подготовки к экспериментам в браузере ПК и в браузере мобильного устройства. Потом напишем обработчик клика мыши и обработчик. . .
|
Философия технологии
iceja 01.02.2026
На мой взгляд у человека в технических проектах остается роль генерального директора. Все остальное нейронки делают уже лучше человека. Они не могут нести предпринимательские риски, не могут. . .
|
SDL3 для Web (WebAssembly): Вывод текста со шрифтом TTF с помощью SDL3_ttf
8Observer8 01.02.2026
Содержание блога
В этой пошаговой инструкции создадим с нуля веб-приложение, которое выводит текст в окне браузера. Запустим на Android на локальном сервере. Загрузим Release на бесплатный. . .
|
SDL3 для Web (WebAssembly): Сборка C/C++ проекта из консоли
8Observer8 30.01.2026
Содержание блога
Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .
|
|
SDL3 для Web (WebAssembly): Установка Emscripten SDK (emsdk) и CMake для сборки C и C++ приложений в Wasm
8Observer8 30.01.2026
Содержание блога
Для того чтобы скачать Emscripten SDK (emsdk) необходимо сначало скачать и уставить Git: Install for Windows. Следуйте стандартной процедуре установки Git через установщик. . . .
|
SDL3 для Android: Подключение Box2D v3, физика и отрисовка коллайдеров
8Observer8 29.01.2026
Содержание блога
Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами. Версия v3 была полностью переписана на Си, в. . .
|
Инструменты COM: Сохранение данный из VARIANT в файл и загрузка из файла в VARIANT
bedvit 28.01.2026
Сохранение базовых типов COM и массивов (одномерных или двухмерных) любой вложенности (деревья) в файл, с возможностью выбора алгоритмов сжатия и шифрования.
Часть библиотеки BedvitCOM
Использованы. . .
|
SDL3 для Android: Загрузка PNG с альфа-каналом с помощью SDL_LoadPNG (без SDL3_image)
8Observer8 28.01.2026
Содержание блога
SDL3 имеет собственные средства для загрузки и отображения PNG-файлов с альфа-каналом и базовой работы с ними. В этой инструкции используется функция SDL_LoadPNG(), которая. . .
|