|
3 / 3 / 1
Регистрация: 17.04.2011
Сообщений: 52
|
|||||||||||
Как хранить огромное количество данных?27.01.2022, 08:39. Показов 1819. Ответов 24
Метки нет (Все метки)
Есть массив данных, он огромен и к нему постоянно идут обращения.
Хранит в себе данные типа
Так вот проблема в том что когда массив очень большой то при сохранение происходит зависание на время, а во время загрузки приложение вообще зависает, сжирает кучу памяти и вылетает. Собственно вопрос есть ли какие то другие способы хранения данных или вообще чтобы этот массив хранился не в памяти во время работы приложения а на диске? Добавлено через 7 минут Извиняюсь, забыл добавить что массив многомерный. Масив такого плана:
0
|
|||||||||||
| 27.01.2022, 08:39 | |
|
Ответы с готовыми решениями:
24
Где хранить большое количество данных Как сохранить строку в файле .bin с учетом, что исходная строка будет иметь огромное количество символов Огромное количество записей в БД |
|
469 / 296 / 166
Регистрация: 18.03.2018
Сообщений: 960
|
||||||
| 27.01.2022, 11:59 | ||||||
|
Вот Вам сравнение скорости массива в памяти и записи в файл. 85 млн строк (файл около гига получается)
Запись в массив - 1,4159674 сек, запись в файл - 24,0174177 секразница - примерно 17 раз (для ssd, HDD -естественно больше). Но это просто запись в файл, С БД - будет быстрее, и это не сотни раз Добавлено через 4 минуты Запись в массив - 1,4595308 сек, запись в файл - 36,4473843 секHDD
0
|
||||||
|
|
||||||||
| 27.01.2022, 13:25 | ||||||||
|
Если обьекты будут небольшие, скажем 500х500х500, можно попробывать такой подход
Добавлено через 7 минут
0
|
||||||||
|
3 / 3 / 1
Регистрация: 17.04.2011
Сообщений: 52
|
|
| 27.01.2022, 13:31 [ТС] | |
|
Да вот я склоняюсь к БД, щас пытаюсь придумать как по трем координатам вытаскивать данные из таблицы
0
|
|
|
3 / 3 / 1
Регистрация: 17.04.2011
Сообщений: 52
|
|
| 28.01.2022, 04:32 [ТС] | |
|
Чето пока фигня какая то получается, я вот задумался, в играх типо майнкраф и 7 days to die тоже ведь воксельный мир(особенно в майнкрафт, он еще и бесконечный), как в них столько данных сохраняется? Сомневаюсь что в БД.
0
|
|
|
14370 / 9471 / 1360
Регистрация: 21.01.2016
Сообщений: 35,741
|
|
| 28.01.2022, 06:47 | |
|
dystopiate, в этих играх данные без БД, всё в памяти.
Вам СУБД порекомендовали исходя из абстрактной фразы "как хранить огромное количество данных". Это вы уже потом про воксели заговорили. Игры в не в List<T> данные втупую хранят.
0
|
|
| 28.01.2022, 06:47 | |
|
Blockandsurf и огромное количество рекламы Wi-Fi раздача на огромное количество абонентов
Огромное количество таблиц, которые не создавал Искать еще темы с ответами Или воспользуйтесь поиском по форуму: |
|
Новые блоги и статьи
|
|||
|
Теория всего 12. ВГК
anaschu 21.07.2026
### Главные семантические изменения и дешифровка новой физики
1. **`REPRODUCTIVE_EMISSION` вместо фотосинтеза (`PS_base`)**: Энергия и ресурсы, которые класс средних мужчин (`_W_MEN_DONORS`). . .
|
Публикация отклонённая на хабре. Как «пернатого» заставить осваивать новые горизонты опыта через масштабирование задачи и целеполагание
Hrethgir 21.07.2026
https:/ / www. cyberforum. ru/ blog_attachment. php?attachmentid=11948&stc=1&d=1784657928
Привет Хабр. В этой статье я расскажу, как один закон эпистемологии позволил мне с ходу запустить уникальный. . .
|
Теория всего 11. Основные параметры
anaschu 21.07.2026
Дешифровка тензорного ядра Soil Chemistry 2. 0: Истинный инвариант Теории Всего
Чистовой исходный код многокомпонентной сукцессии зафиксирован. Модель оперирует единым вектором состояния. . .
|
Теория всего 10. Клод трусишка
anaschu 21.07.2026
Алгоритмический суицид ИИ: Когда математика ОДУ взламывает цензурные шлюзы
Свежайший мета-прецедент нашей разработки! Клод официально отказался строить итоговую кроссплатформенную модель, как. . .
|
|
Теория всего 9. Окончательная проработка метафоры "дерево = традиции"
anaschu 21.07.2026
Скрытые параметры ядра ОДУ: Механика Глубинного Рока
Клод утаил от вас ключевую математику кризисов. В движке игры зашиты пять скрытых коэффициентов, определяющих, как именно ТНК и Мемы ломают. . .
|
Теория всего 8. Clauude трусишка. Ответ джемени
anaschu 21.07.2026
Игровой баланс «Модели Всего»: Алгоритмический блок как механика Семантического БуфераЭтот скриншот отказа Клода — идеальный, чистейший прецедент для нашей Теории Всего. Вы столкнулись не просто с. . .
|
Теория всего 7. Дерево - это патриархат, грибы - это феминизм
anaschu 21.07.2026
Уничтожение Патриархата: Как ТНК, Мемы и Половой отбор зачистили «Сексуальный Пролетариат»
Величайшая иллюзия современного человека — вера в «свободу воли», «социальный прогресс» и «эволюцию. . .
|
История и социология Терры на примере борьбы микориз за пространство. 1. Глоссарий терры.
anaschu 21.07.2026
Решил тут подумать о возможности сделать лор некоторой комп игры - стратегии, или худжественной книги антиутопии, которые будут юзать планету,которая максимально будет похожа на нашу землю, но где. . .
|