|
0 / 0 / 0
Регистрация: 26.11.2023
Сообщений: 6
|
||||||
Ошибки при большом объеме разделяемой памяти15.03.2024, 04:45. Показов 1730. Ответов 13
Всем привет.
В программе использую 3 фрагмента разделяемой памяти суммарно 100Гб. При первом вызове программы сохраняю shmid и shadr в файл и загружаю дамп базы данных с диска. При последующих вызовах беру shmid и shadr из файлов shm0... shm1 и работаю с уже загруженной БД. Все работает до тех пор, пока база данных одна. При двух базах данных (соответственно 6 кусках разделяемой памяти) почти всегда происходит наложение. С памятью работаю при помощи следующей функции. RAM достаточно. Значение vm.nr_hugepages= в файле /etc/sysctl.conf адекватное.
0
|
||||||
| 15.03.2024, 04:45 | |
|
Ответы с готовыми решениями:
13
Расширенный поиск в PickList при большом объеме информации memo статус бар тормозит при большом объёме Оптимизация кода скрипта при большом объеме информации |
|
фрилансер
6462 / 5670 / 1131
Регистрация: 11.10.2019
Сообщений: 15,100
|
|
| 15.03.2024, 07:26 | |
|
mcman828, в коде индусская перчинка и просто UB. Для начала - всё это нужно переписать попрямее, потом уже искать, где и какие функции ОС вызываешь с ошибками
0
|
|
|
6352 / 3523 / 1428
Регистрация: 07.02.2019
Сообщений: 8,995
|
|||
| 15.03.2024, 17:15 | |||
|
Добавлено через 1 минуту
0
|
|||
|
Windows must die
|
||
| 15.03.2024, 17:21 | ||
|
Если хочется, чтобы другие процессы имели к нему доступ, в них тоже нужно вызывать shmget по заданному ключу. Понятно, что уже с нулем в размере и флагах.
0
|
||
|
0 / 0 / 0
Регистрация: 26.11.2023
Сообщений: 6
|
|||||
| 15.03.2024, 18:34 [ТС] | |||||
|
Периодически эти 64 бита оказываются изменены. а при запуске с аргументом "./program DB2" - доступ к 4, 5, 6. Исходил из описания shmat:
0
|
|||||
|
6352 / 3523 / 1428
Регистрация: 07.02.2019
Сообщений: 8,995
|
|||
| 15.03.2024, 19:06 | |||
|
0
|
|||
|
Windows must die
|
||
| 15.03.2024, 19:07 | ||
|
Исключительно вызов shmget, а потом уже все остальное. Сохранить ключ, а по нему уже получать доступ, чтобы ftok лишний раз не вызывать.
0
|
||
|
0 / 0 / 0
Регистрация: 26.11.2023
Сообщений: 6
|
|||
| 15.03.2024, 23:06 [ТС] | |||
|
https://stackoverflow.com/ques... ll-shmaddr
0
|
|||
|
6352 / 3523 / 1428
Регистрация: 07.02.2019
Сообщений: 8,995
|
||
| 15.03.2024, 23:31 | ||
|
А еще, в зависимости от того, как работает ваша программа, гарантий того, что "сохраненный" вами диапазон виртуального адресного пространства будет "свободен" в следующий раз, может не быть.
1
|
||
|
0 / 0 / 0
Регистрация: 26.11.2023
Сообщений: 6
|
|
| 16.03.2024, 00:19 [ТС] | |
|
Не совсем понял, почему нужно сохранять key, а по нему получать shmid = shmget(key, 0, 0).
Если из консоли удалить сегмент памяти ipcrm -m xxx, а потом заново создать с тем же key, то значение shmid будет отличаться. Если сохранять shmid, то по нему shmat всегда будет присоединять один и тот же сегмент памяти. По поводу абсолютных адресов - мне кажется, что будет быстрее. Проверю.
0
|
|
|
6352 / 3523 / 1428
Регистрация: 07.02.2019
Сообщений: 8,995
|
||
| 16.03.2024, 00:37 | ||
|
Добавлено через 2 минуты Хотя Linux позволяет присоеденить помеченный на удаление (но не реально удаленный) сегмент через shmid, это да.
0
|
||
|
0 / 0 / 0
Регистрация: 26.11.2023
Сообщений: 6
|
|
| 16.03.2024, 01:39 [ТС] | |
|
key один shmid разные.
Путь к файлу по которому запущен ftok один и тот же, хотя все файлы после ipcrm были удалены и созданы заново.
0
|
|
|
6352 / 3523 / 1428
Регистрация: 07.02.2019
Сообщений: 8,995
|
||
| 16.03.2024, 01:49 | ||
|
Вы не сможете присоеденить сегмент по его id, после того как он будет удален(т.е. помечен на удаление и нет процессов, к которым этот сегмент приаттачен - счетчик shm_nattch обнулен)
1
|
||
|
0 / 0 / 0
Регистрация: 26.11.2023
Сообщений: 6
|
|
| 16.03.2024, 02:31 [ТС] | |
|
Я понял, спасибо за подсказки.
Разобрался какая структура у адресного пространства процесса kernel.org и как присваиваются адреса github.com/CMCDragonkai. Изначальная ошибка явно не связана с выделением памяти, а где-то в алгоритмах обработки БД. По поводу абсолютных указателей и shmat по заранее заданному адресу останусь при своем мнении.
0
|
|
| 16.03.2024, 02:31 | |
|
Помогаю со студенческими работами здесь
14
Падение скорости записи на ССД при большом объеме Как правильнее работать с базой при большом объеме данных? Text Mesh Pro не работает при большом объеме текста Как правильно загружать изображение и Bitmap compress при большом объеме фото
Искать еще темы с ответами Или воспользуйтесь поиском по форуму: |
|
Новые блоги и статьи
|
|||
|
[Owen Logic] Поддержание уровня воды в резервуаре количеством включённых насосов: моделирование и выбор регулятора
ФедосеевПавел 14.03.2026
Поддержание уровня воды в резервуаре количеством включённых насосов: моделирование и выбор регулятора
ВВЕДЕНИЕ
Выполняя задание на управление насосной группой заполнения резервуара,. . .
|
делаю науч статью по влиянию грибов на сукцессию
anaschu 13.03.2026
прикрепляю статью
|
SDL3 для Desktop (MinGW): Создаём пустое окно с нуля для 2D-графики на SDL3, Си и C++
8Observer8 10.03.2026
Содержание блога
Финальные проекты на Си и на C++:
hello-sdl3-c. zip
hello-sdl3-cpp. zip
Результат:
|
Установка CMake и MinGW 13.1 для сборки С и C++ приложений из консоли и из Qt Creator в EXE
8Observer8 10.03.2026
Содержание блога
MinGW - это коллекция инструментов для сборки приложений в EXE. CMake - это система сборки приложений. Здесь описаны базовые шаги для старта программирования с помощью CMake и. . .
|
|
Как дизайн сайта влияет на конверсию: 7 решений, которые реально повышают заявки
Neotwalker 08.03.2026
Многие до сих пор воспринимают дизайн сайта как “красивую оболочку”. На практике всё иначе: дизайн напрямую влияет на то, оставит человек заявку или уйдёт через несколько секунд.
Даже если у вас. . .
|
Модульная разработка через nuget packages
DevAlt 07.03.2026
Сложившийся в . Net-среде способ разработки чаще всего предполагает
монорепозиторий в котором находятся все исходники.
При создании нового решения, мы просто добавляем нужные проекты
и имеем. . .
|
Модульный подход на примере F#
DevAlt 06.03.2026
В блоге дяди Боба наткнулся на такое определение:
В этой книге («Подход, основанный на вариантах использования») Ивар утверждает,
что архитектура программного обеспечения — это
структуры,. . .
|
Управление камерой с помощью скрипта OrbitControls.js на Three.js: Вращение, зум и панорамирование
8Observer8 05.03.2026
Содержание блога
Финальная демка в браузере работает на Desktop и мобильных браузерах. Итоговый код: orbit-controls-threejs-js. zip. Сканируйте QR-код на мобильном. Вращайте камеру одним пальцем,. . .
|