Эксперт .NET
 Аватар для Casper-SC
4434 / 2094 / 404
Регистрация: 27.03.2010
Сообщений: 5,657
Записей в блоге: 1

Архивирование записей из БД, через определённый промежуток времени. Как лучше сделать?

17.02.2016, 15:53. Показов 2030. Ответов 1

Студворк — интернет-сервис помощи студентам
Предположим есть БД, в которую сервер сливает данные из большого кол-ва однотипных источников. Например, из ночных клубов финансовую информацию о покупках через кассу, не важно, просто пример.

Сейчас за одни сутки в БД накапливается ~10 Гб данных, а максимально допустимо 30 Гб в сутки.

В БД есть таблица Payment. Вот в эту таблицу за сутки может слиться очень большое кол-во записей с 1000 клубов. У нас есть условие, что нужно данные из этой таблицы через 2 года отправлять на архивный сервер. Вот как лучше организовать такие таблицы, чтобы это не тормозило. Если у нас MS SQL Server Standard.

Данные будут периодически как-то проверяться есть ли для репликации в архив что-то сегодня. Данные будут отбираться частями и отправляться, а не сразу всё за сутки, что есть. То есть обращений на чтение и поиск необходимых данных для отправки в архив может быть за день приличное кол-во.

Вариант 1:
Создать просто таблицу Payment и добавить в БД поле CreationDate типа Datetime2. Далее добавить индекс по этому полю.

Но непонятно, как будет это работать. Будет ли тормозить.

Вариант 2:
Сохранять в БД таблицы для каждого дня. Например: Payment_17_02_2016. Все данные пришедшие 17.02.2016 мы пишем в Payment_17_02_2016 и каждый день по той же схеме. Что даст возможность читать только из таблиц, название которых начинается с определённой даты, а не по одной гигантской таблице.
Создаём таблицу: Payment_Tables, в которую пишем имена всех существующих таблиц Payment_DD_ MM_HHHH Payment_01_01_2020...
Возле каждой таблицы Payment_DD_ MM_HHHH создаём Payment_DD_ MM_HHHH_NR (Not Replicated), в которой только идентификаторы записей из одноименной таблицы, но без _NR, записи, которые не были отправлены в архив. Суть в том, что когда таблица Payment_17_02_2016 _NR не содержит данных, то в таблице Payment_Tables мы помечаем таблицу Payment_17_02_2016, как реплицированную и удаляем сразу всю таблицу из БД, так как данные из неё отправлены.

Это вроде бы должно неплохо работать, но в реализации это будет не так уж и просто. Таблиц много разных. Ещё придётся писать всякие тригеры, представления, короче, такой вариант всё сильно усложняет.

Вообще, есть идеи, как это дело лучше организовать?
Миниатюры
Архивирование записей из БД, через определённый промежуток времени. Как лучше сделать?  
0
cpp_developer
Эксперт
20123 / 5690 / 1417
Регистрация: 09.04.2010
Сообщений: 22,546
Блог
17.02.2016, 15:53
Ответы с готовыми решениями:

Исчезание предмета через определённый промежуток времени
Здравствуйте!Такая ситуация: сделал я значит яйцо которое падает и при падении разбивается, как прописать чтобы разбитое яйцо лежало на...

Перелистывание картинок через определённый промежуток времени
К примеру, мне нужно что-бы при запуске конвертировании программы, 5 картинок менялись собой местами беспрерывно.Можно это сделать в C++...

Перезапуск bat-файла через определённый промежуток времени
Здравствуйте . есть bat файл , он иногда подвисает и требуется его полная перезагрузка. Может быть есть какой-то софт, который бы...

1
3614 / 2135 / 756
Регистрация: 02.06.2013
Сообщений: 5,169
17.02.2016, 23:28
Вам бы подошло секционирование. Но, увы, редакция сервера не позволит.
Попробуйте секционированное представление - https://technet.microsoft.com/... 05%29.aspx

Плюс DDL-триггер, который будет реагировать на создание таблицы, соответствующей определенному шаблону и добавлять ее к секционированному представлению, а так же генерировать instead of триггеры для этого представления.
1
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
raxper
Эксперт
30234 / 6612 / 1498
Регистрация: 28.12.2010
Сообщений: 21,154
Блог
17.02.2016, 23:28
Помогаю со студенческими работами здесь

Обработка событий KeyEvent через определённый промежуток времени
есть окно, которое перерисовывается каждые 100 мс. Thread th = new Thread(new Runnable() { public void run() { while...

Хочу чтобы через определённый промежуток времени появлялись определенные компоненты
Помогите пожалуйста Хочу чтобы через определённый промежуток времени появлялись определенные компоненты Что в коде не правильно? ...

Как сделать так чтобы картинка могла меняться через определенный промежуток времени?
как сделать так чтобы картинка могла меняться через определенный промежуток времени на C# Windows Forms

Как сделать, чтобы текст выводился поочередно буква за буквой через определенный промежуток времени?
Еще раз доброго времени суток! Задача такая: есть текст, который нужно выводить плавно, буква за буквой (такой эффект многие наверняка...

Сделать снимок через промежуток времени Afoge.NET
Есть проект в WPF. Как сделать четыре снимка, при нажатии на кнопку, через каждые четыре секунды, и поместить их в разные image ? ...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
2
Ответ Создать тему
Опции темы

Новые блоги и статьи
Валидация и контроль данных табличной части документа перед записью
Maks 22.04.2026
Алгоритм из решения ниже реализован на примере нетипового документа, разработанного в КА2. Задача: контроль и валидация данных табличной части документа перед записью с учетом регламента компании. . .
Отчёт о затраченных материалах за определенный период с макетом печатной формы
Maks 21.04.2026
Отчёт из решения ниже размещён в конфигурации КА2. Задача: разработка отчёта по затраченным материалам за определённый период, с возможностью вывода печатной формы отчёта с шапкой и подвалом. В. . .
Отчёт о спецтехнике находящейся в ремонте
Maks 20.04.2026
Отчёт из решения ниже размещен в конфигурации КА2. Задача: отобразить спецтехнику, которая на данный момент находится в ремонте. Есть нетиповой документ "Заявка на ремонт спецтехники" который. . .
Памятка для бота и "визитка" для читателей "Semantic Universe Layer (Слой семантической вселенной)"
Hrethgir 19.04.2026
Сгенерировано для краткого описания по случаю сборки и компиляции скелета серверного приложения. И пусть после этого скажут, что статьи сгенерированные AI - туфта и не интересно. И это не реклама -. . .
Запрет удаления строк ТЧ документа при определённом условии
Maks 19.04.2026
Алгоритм из решения ниже реализован на примере нетипового документа "Аккумуляторы", разработанного в конфигурации КА2. У данного документа есть ТЧ, в которой в зависимости от прав доступа. . .
Модель заражения группы наркоманов
alhaos 17.04.2026
Условия задачи сформулированы тут Суть: - Группа наркоманов из 10 человек. - Только один инфицирован ВИЧ. - Колются одной иглой. - Колются раз в день. - Колются последовательно через. . .
Мысли в слух. Про "навсегда".
kumehtar 16.04.2026
Подумалось тут, что наверное очень глупо использовать во всяких своих установках понятие "навсегда". Это очень сильное понятие, и я только начинаю понимать край его смысла, не смотря на то что давно. . .
My Business CRM
MaGz GoLd 16.04.2026
Всем привет, недавно возникла потребность создать CRM, для личных нужд. Собственно программа предоставляет из себя базу данных клиентов, в которой можно фиксировать звонки, стадии сделки, а также. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru