|
0 / 0 / 0
Регистрация: 26.11.2023
Сообщений: 6
|
||||||
Ошибки при большом объеме разделяемой памяти15.03.2024, 04:45. Показов 1661. Ответов 13
Всем привет.
В программе использую 3 фрагмента разделяемой памяти суммарно 100Гб. При первом вызове программы сохраняю shmid и shadr в файл и загружаю дамп базы данных с диска. При последующих вызовах беру shmid и shadr из файлов shm0... shm1 и работаю с уже загруженной БД. Все работает до тех пор, пока база данных одна. При двух базах данных (соответственно 6 кусках разделяемой памяти) почти всегда происходит наложение. С памятью работаю при помощи следующей функции. RAM достаточно. Значение vm.nr_hugepages= в файле /etc/sysctl.conf адекватное.
0
|
||||||
| 15.03.2024, 04:45 | |
|
Ответы с готовыми решениями:
13
Расширенный поиск в PickList при большом объеме информации memo статус бар тормозит при большом объёме Оптимизация кода скрипта при большом объеме информации |
|
фрилансер
6442 / 5636 / 1127
Регистрация: 11.10.2019
Сообщений: 14,983
|
|
| 15.03.2024, 07:26 | |
|
mcman828, в коде индусская перчинка и просто UB. Для начала - всё это нужно переписать попрямее, потом уже искать, где и какие функции ОС вызываешь с ошибками
0
|
|
|
6352 / 3523 / 1428
Регистрация: 07.02.2019
Сообщений: 8,995
|
|||
| 15.03.2024, 17:15 | |||
|
Добавлено через 1 минуту
0
|
|||
|
Windows must die
|
||
| 15.03.2024, 17:21 | ||
|
Если хочется, чтобы другие процессы имели к нему доступ, в них тоже нужно вызывать shmget по заданному ключу. Понятно, что уже с нулем в размере и флагах.
0
|
||
|
0 / 0 / 0
Регистрация: 26.11.2023
Сообщений: 6
|
|||||
| 15.03.2024, 18:34 [ТС] | |||||
|
Периодически эти 64 бита оказываются изменены. а при запуске с аргументом "./program DB2" - доступ к 4, 5, 6. Исходил из описания shmat:
0
|
|||||
|
6352 / 3523 / 1428
Регистрация: 07.02.2019
Сообщений: 8,995
|
|||
| 15.03.2024, 19:06 | |||
|
0
|
|||
|
Windows must die
|
||
| 15.03.2024, 19:07 | ||
|
Исключительно вызов shmget, а потом уже все остальное. Сохранить ключ, а по нему уже получать доступ, чтобы ftok лишний раз не вызывать.
0
|
||
|
0 / 0 / 0
Регистрация: 26.11.2023
Сообщений: 6
|
|||
| 15.03.2024, 23:06 [ТС] | |||
|
https://stackoverflow.com/ques... ll-shmaddr
0
|
|||
|
6352 / 3523 / 1428
Регистрация: 07.02.2019
Сообщений: 8,995
|
||
| 15.03.2024, 23:31 | ||
|
А еще, в зависимости от того, как работает ваша программа, гарантий того, что "сохраненный" вами диапазон виртуального адресного пространства будет "свободен" в следующий раз, может не быть.
1
|
||
|
0 / 0 / 0
Регистрация: 26.11.2023
Сообщений: 6
|
|
| 16.03.2024, 00:19 [ТС] | |
|
Не совсем понял, почему нужно сохранять key, а по нему получать shmid = shmget(key, 0, 0).
Если из консоли удалить сегмент памяти ipcrm -m xxx, а потом заново создать с тем же key, то значение shmid будет отличаться. Если сохранять shmid, то по нему shmat всегда будет присоединять один и тот же сегмент памяти. По поводу абсолютных адресов - мне кажется, что будет быстрее. Проверю.
0
|
|
|
6352 / 3523 / 1428
Регистрация: 07.02.2019
Сообщений: 8,995
|
||
| 16.03.2024, 00:37 | ||
|
Добавлено через 2 минуты Хотя Linux позволяет присоеденить помеченный на удаление (но не реально удаленный) сегмент через shmid, это да.
0
|
||
|
0 / 0 / 0
Регистрация: 26.11.2023
Сообщений: 6
|
|
| 16.03.2024, 01:39 [ТС] | |
|
key один shmid разные.
Путь к файлу по которому запущен ftok один и тот же, хотя все файлы после ipcrm были удалены и созданы заново.
0
|
|
|
6352 / 3523 / 1428
Регистрация: 07.02.2019
Сообщений: 8,995
|
||
| 16.03.2024, 01:49 | ||
|
Вы не сможете присоеденить сегмент по его id, после того как он будет удален(т.е. помечен на удаление и нет процессов, к которым этот сегмент приаттачен - счетчик shm_nattch обнулен)
1
|
||
|
0 / 0 / 0
Регистрация: 26.11.2023
Сообщений: 6
|
|
| 16.03.2024, 02:31 [ТС] | |
|
Я понял, спасибо за подсказки.
Разобрался какая структура у адресного пространства процесса kernel.org и как присваиваются адреса github.com/CMCDragonkai. Изначальная ошибка явно не связана с выделением памяти, а где-то в алгоритмах обработки БД. По поводу абсолютных указателей и shmat по заранее заданному адресу останусь при своем мнении.
0
|
|
| 16.03.2024, 02:31 | |
|
Помогаю со студенческими работами здесь
14
Падение скорости записи на ССД при большом объеме Как правильнее работать с базой при большом объеме данных? Text Mesh Pro не работает при большом объеме текста Как правильно загружать изображение и Bitmap compress при большом объеме фото
Искать еще темы с ответами Или воспользуйтесь поиском по форуму: |
|
Новые блоги и статьи
|
||||
|
PhpStorm 2025.3: WSL Terminal всегда стартует в ~
and_y87 14.12.2025
PhpStorm 2025. 3: WSL Terminal всегда стартует в ~ (home), игнорируя директорию проекта
Симптом:
После обновления до PhpStorm 2025. 3 встроенный терминал WSL открывается в домашней директории. . .
|
Access
VikBal 11.12.2025
Помогите пожалуйста !! Как объединить 2 одинаковые БД Access с разными данными.
|
Новый ноутбук
volvo 07.12.2025
Всем привет.
По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне:
Ryzen 5 7533HS
64 Gb DDR5
1Tb NVMe
16" Full HD Display
Win11 Pro
|
Музыка, написанная Искусственным Интеллектом
volvo 04.12.2025
Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .
|
От async/await к виртуальным потокам в Python
IndentationError 23.11.2025
Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .
|
|
Поиск "дружественных имён" СОМ портов
Argus19 22.11.2025
Поиск "дружественных имён" СОМ портов
На странице:
https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/
нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .
|
Сколько Государство потратило денег на меня, обеспечивая инсулином.
Programma_Boinc 20.11.2025
Сколько Государство потратило денег на меня, обеспечивая инсулином.
Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов.
. . .
|
Ломающие изменения в C#.NStar Alpha
Etyuhibosecyu 20.11.2025
Уже можно не только тестировать, но и пользоваться C#. NStar - писать оконные приложения, содержащие надписи, кнопки, текстовые поля и даже изображения, например, моя игра "Три в ряд" написана на этом. . .
|
Мысли в слух
kumehtar 18.11.2025
Кстати, совсем недавно имел разговор на тему медитаций с людьми. И обнаружил, что они вообще не понимают что такое медитация и зачем она нужна. Самые базовые вещи. Для них это - когда просто люди. . .
|
Создание Single Page Application на фреймах
krapotkin 16.11.2025
Статья исключительно для начинающих. Подходы оригинальностью не блещут.
В век Веб все очень привыкли к дизайну Single-Page-Application .
Быстренько разберем подход "на фреймах".
Мы делаем одну. . .
|