Можно ли обойти ограничение объема используемой памяти?

@Sampl · Регистрация: 09.02.2014

Студворк — интернет-сервис помощи студентам

Мне нужно создавать большое количество массивов и порой их так много, что для объявления их всех не хватает доступной памяти.
Нужен удобный способ хранения этих массивов.
Что приходит на ум, сериализовать каждый и сохранить на диск. По мере надобности извлекать, а затем сохранять обратно.
Может быть есть более быстрый и удобный метод?

@Jungl · 21.03.2019, 14:54

Сообщение от Sampl

Может быть есть более быстрый и удобный метод?

СУБД?

@Yury Komar · 21.03.2019, 15:20

СУБД или храните массивы в табличном виде типа DataTable или DataSet

@Замабувараев · 21.03.2019, 15:35

Рекомендую обратить внимание на отображённые в память файлы
https://docs.microsoft.com/ru-... etcore-1.1

@Sampl · 22.03.2019, 04:24 **[ТС]**

Сообщение от Yury Komar

СУБД или храните массивы в табличном виде типа DataTable или DataSet

СУБД я более менее представляю, она может занять неограниченную память. А DataTable или DataSet как то работают с памятью иначе? Мне кажется разницы по сравнению с массивами не будет.

@Yury Komar · 22.03.2019, 06:15

Sampl, так а о каком конкретно объёме памяти идет речь? измеряется гигабайтами что-ли? Что хранится в ваших массивах и какую задачу они выполняют в вашей программе?

Добавлено через 2 минуты
если они играют роль базы данных, то конечно вам смотреть в сторону какой-нибудь локальной БД, типа SQLITE или, например, подходящий для небольшого объема данных - Access.

@Sampl · 22.03.2019, 07:51 **[ТС]**

Объем - единицы гигабайт.
Расчет значений нужного параметра ведется для большой площади (карты) и для большого количества источников которые влияют на результат. Поскольку расчеты выполняются параллельно в разных потоках то и обращение в любой момент возможно к любому пикселю карты. Карта порезана на тайлы 256х256, они и есть массивы которыми я оперирую. Каждый поток может в любой момент обратиться к любому пикселю любого массива, для чего приняты меры обеспечения потокобезопасности.
Если я при обращении к пикселю из потока буду еще и загружать файл, то пожалуй скорость вычислений упадет в 1000 раз.

@Yury Komar · 22.03.2019, 08:36

Sampl, тогда вам нужна SQLITE... Её удачно используют в такой библиотеке, как GMap.NET

Uswer · 22.03.2019, 08:45

Мне думается Вам нужно не с объемом памяти решать задачу, а с основным алгоритмом обработки данных. Распределять расчеты так, чтобы объем используемых данных был ограничен.

Новые блоги и статьи Все статьи Все блоги /
Реалии Hrethgir 01.03.2026 Нет, я не закончил до сих пор симулятор. Эта задача сложнее. Не получилось уйти в плавсостав, но оно и к лучшему, возможно. Точнее получалось - но сварщиком в палубную команду, а это значит, в моём. . .	Ритм жизни kumehtar 27.02.2026 Иногда приходится жить в ритме, где дел становится всё больше, а вовлечения в происходящее — всё меньше. Плотный график не даёт вниманию закрепиться ни на одном событии. Утро начинается с быстрых,. . .	SDL3 для Web (WebAssembly): Сборка библиотек: SDL3, Box2D, FreeType, SDL3_ttf, SDL3_mixer и SDL3_image из исходников с помощью CMake и Emscripten 8Observer8 27.02.2026 Недавно вышла версия 3. 4. 2 библиотеки SDL3. На странице официальной релиза доступны исходники, готовые DLL (для x86, x64, arm64), а также библиотеки для разработки под Android, MinGW и Visual Studio. . . .	SDL3 для Web (WebAssembly): Реализация движения на Box2D v3 - трение и коллизии с повёрнутыми стенами 8Observer8 20.02.2026 Содержание блога Box2D позволяет легко создать главного героя, который не проходит сквозь стены и перемещается с заданным трением о препятствия, которые можно располагать под углом, как верхнее. . .
Конвертировать закладки radiotray-ng в m3u-плейлист damix 19.02.2026 Это можно сделать скриптом для PowerShell. Использование . \СonvertRadiotrayToM3U. ps1 <path_to_bookmarks. json> Рядом с файлом bookmarks. json появится файл bookmarks. m3u с результатом. # Check if. . .	Семь CDC на одном интерфейсе: 5 U[S]ARTов, 1 CAN и 1 SSI Eddy_Em 18.02.2026 Постепенно допиливаю свою "многоинтерфейсную плату". Выглядит вот так: https:/ / www. cyberforum. ru/ blog_attachment. php?attachmentid=11617&stc=1&d=1771445347 Основана на STM32F303RBT6. На борту пять. . .	Камера Toupcam IUA500KMA Eddy_Em 12.02.2026 Т. к. у всяких "хикроботов" слишком уж мелкий пиксель, для подсмотра в ESPriF они вообще плохо годятся: уже 14 величину можно рассмотреть еле-еле лишь на экспозициях под 3 секунды (а то и больше),. . .	И ясному Солнцу zbw 12.02.2026 И ясному Солнцу, и светлой Луне. В мире покоя нет и люди не могут жить в тишине. А жить им немного лет.

@Sampl 17 / 9 / 4 Регистрация: 09.02.2014 Сообщений: 197

	Можно ли обойти ограничение объема используемой памяти? 21.03.2019, 13:41. Показов 1597. Ответов 8 Метки нет (Все метки) Мне нужно создавать большое количество массивов и порой их так много, что для объявления их всех не хватает доступной памяти. Нужен удобный способ хранения этих массивов. Что приходит на ум, сериализовать каждый и сохранить на диск. По мере надобности извлекать, а затем сохранять обратно. Может быть есть более быстрый и удобный метод? 0

@Yury Komar Модератор 4358 / 3428 / 512 Регистрация: 27.01.2014 Сообщений: 6,258
	21.03.2019, 15:20
	СУБД или храните массивы в табличном виде типа DataTable или DataSet 0

@Замабувараев COM‐пропагандист 936 / 785 / 149 Регистрация: 18.12.2014 Сообщений: 2,256 Записей в блоге: 4
	21.03.2019, 15:35
	Рекомендую обратить внимание на отображённые в память файлы https://docs.microsoft.com/ru-... etcore-1.1 0

@Yury Komar Модератор 4358 / 3428 / 512 Регистрация: 27.01.2014 Сообщений: 6,258
	22.03.2019, 06:15
	Sampl, так а о каком конкретно объёме памяти идет речь? измеряется гигабайтами что-ли? Что хранится в ваших массивах и какую задачу они выполняют в вашей программе? Добавлено через 2 минуты если они играют роль базы данных, то конечно вам смотреть в сторону какой-нибудь локальной БД, типа SQLITE или, например, подходящий для небольшого объема данных - Access. 0

@Sampl 17 / 9 / 4 Регистрация: 09.02.2014 Сообщений: 197
	22.03.2019, 07:51 [ТС]
	Объем - единицы гигабайт. Расчет значений нужного параметра ведется для большой площади (карты) и для большого количества источников которые влияют на результат. Поскольку расчеты выполняются параллельно в разных потоках то и обращение в любой момент возможно к любому пикселю карты. Карта порезана на тайлы 256х256, они и есть массивы которыми я оперирую. Каждый поток может в любой момент обратиться к любому пикселю любого массива, для чего приняты меры обеспечения потокобезопасности. Если я при обращении к пикселю из потока буду еще и загружать файл, то пожалуй скорость вычислений упадет в 1000 раз. 0

@Yury Komar Модератор 4358 / 3428 / 512 Регистрация: 27.01.2014 Сообщений: 6,258
	22.03.2019, 08:36
	Sampl, тогда вам нужна SQLITE... Её удачно используют в такой библиотеке, как GMap.NET 0

Uswer 2282 / 1598 / 400 Регистрация: 26.06.2017 Сообщений: 4,733 Записей в блоге: 1
	22.03.2019, 08:45
	Мне думается Вам нужно не с объемом памяти решать задачу, а с основным алгоритмом обработки данных. Распределять расчеты так, чтобы объем используемых данных был ограничен. 0