Хранение сообщений для чатов

@Shchusia · Регистрация: 20.11.2017

Студворк — интернет-сервис помощи студентам

добрый день
у меня возник такой вопрос " как хранить и быстро отдавать сообщения из чата"
изначально была идея хранить все в реляционной базе данных, но тут возникает такая проблема, что с некоторым временем таблица сообщений разрастется, и скорость отдачи замедлиться
была идея репликации по юзерам(стоит ли такое делать)
еще был вариант "перебрасывать пачками" из реляционной в не реляционную(например монгу), но тут возникает вопрос получения сообщений с пагинацией
что посоветуете опираясь на свой опыт ?
заранее спасибо

@pincet · 25.01.2018, 13:35

для начала (это если говорить по реляционные) прочитать про индексы

@Shchusia · 25.01.2018, 13:45 **[ТС]**

pincet, то есть вы предлагаете делать некластерный индекс на сообщения по столбцу ссылающемуся на чат ?

@Meridian21 · 25.01.2018, 14:28

Shchusia, вот чего точно не стоит делать - это городить мосты между реляционными и не реляционными БД. Это тут явно лишнее.
Как вариант, стоит сразу оценить масштабы задачи. Как минимум, кол-во пользователей, которое будет нагружать систему. Если останавливаться на варианте РСУБД, то надо ознакомиться с индексами, партиционированием таблиц и, возможно, денормализацией данных (в пользу скорости работы).
Как вариант, возможно использовать что-то документоориентированное couchdb, cassandra. Может быть Redis с его publish/subscribe.

@pincet · 25.01.2018, 14:55

индексы проектируют исходя из того, какие выборки предполагаются
также учитываем, что наличие индекса в сферической СУБД выливается в замедления вставки/обновления данных

@Shchusia · 25.01.2018, 15:27 **[ТС]**

Meridian21, как вы посоветуете партицировать по хэшу или по id чата
цель ускорить отдачу сообщений при пагинации страниц для чатов и диалогов

Новые блоги и статьи Все статьи Все блоги /
SDL3 для Web (WebAssembly): Обработчик клика мыши в браузере ПК и касания экрана в браузере на мобильном устройстве 8Observer8 02.02.2026 Содержание блога Для начала пошагово создадим рабочий пример для подготовки к экспериментам в браузере ПК и в браузере мобильного устройства. Потом напишем обработчик клика мыши и обработчик. . .	Философия технологии iceja 01.02.2026 На мой взгляд у человека в технических проектах остается роль генерального директора. Все остальное нейронки делают уже лучше человека. Они не могут нести предпринимательские риски, не могут. . .	SDL3 для Web (WebAssembly): Вывод текста со шрифтом TTF с помощью SDL3_ttf 8Observer8 01.02.2026 Содержание блога В этой пошаговой инструкции создадим с нуля веб-приложение, которое выводит текст в окне браузера. Запустим на Android на локальном сервере. Загрузим Release на бесплатный. . .	SDL3 для Web (WebAssembly): Сборка C/C++ проекта из консоли 8Observer8 30.01.2026 Содержание блога Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .
SDL3 для Web (WebAssembly): Установка Emscripten SDK (emsdk) и CMake для сборки C и C++ приложений в Wasm 8Observer8 30.01.2026 Содержание блога Для того чтобы скачать Emscripten SDK (emsdk) необходимо сначало скачать и уставить Git: Install for Windows. Следуйте стандартной процедуре установки Git через установщик. . . .	SDL3 для Android: Подключение Box2D v3, физика и отрисовка коллайдеров 8Observer8 29.01.2026 Содержание блога Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами. Версия v3 была полностью переписана на Си, в. . .	Инструменты COM: Сохранение данный из VARIANT в файл и загрузка из файла в VARIANT bedvit 28.01.2026 Сохранение базовых типов COM и массивов (одномерных или двухмерных) любой вложенности (деревья) в файл, с возможностью выбора алгоритмов сжатия и шифрования. Часть библиотеки BedvitCOM Использованы. . .	SDL3 для Android: Загрузка PNG с альфа-каналом с помощью SDL_LoadPNG (без SDL3_image) 8Observer8 28.01.2026 Содержание блога SDL3 имеет собственные средства для загрузки и отображения PNG-файлов с альфа-каналом и базовой работы с ними. В этой инструкции используется функция SDL_LoadPNG(), которая. . .

@Shchusia 43 / 43 / 23 Регистрация: 20.11.2017 Сообщений: 80

	Хранение сообщений для чатов 25.01.2018, 13:29. Показов 4345. Ответов 5 Метки нет (Все метки) добрый день у меня возник такой вопрос " как хранить и быстро отдавать сообщения из чата" изначально была идея хранить все в реляционной базе данных, но тут возникает такая проблема, что с некоторым временем таблица сообщений разрастется, и скорость отдачи замедлиться была идея репликации по юзерам(стоит ли такое делать) еще был вариант "перебрасывать пачками" из реляционной в не реляционную(например монгу), но тут возникает вопрос получения сообщений с пагинацией что посоветуете опираясь на свой опыт ? заранее спасибо 0

@pincet 1654 / 1153 / 173 Регистрация: 23.07.2010 Сообщений: 6,910
	25.01.2018, 13:35
	для начала (это если говорить по реляционные) прочитать про индексы 0

@Shchusia 43 / 43 / 23 Регистрация: 20.11.2017 Сообщений: 80
	25.01.2018, 13:45 [ТС]
	pincet, то есть вы предлагаете делать некластерный индекс на сообщения по столбцу ссылающемуся на чат ? 0

@Meridian21 Zero day 267 / 231 / 78 Регистрация: 16.12.2015 Сообщений: 943 Записей в блоге: 4
	25.01.2018, 14:28
	Shchusia, вот чего точно не стоит делать - это городить мосты между реляционными и не реляционными БД. Это тут явно лишнее. Как вариант, стоит сразу оценить масштабы задачи. Как минимум, кол-во пользователей, которое будет нагружать систему. Если останавливаться на варианте РСУБД, то надо ознакомиться с индексами, партиционированием таблиц и, возможно, денормализацией данных (в пользу скорости работы). Как вариант, возможно использовать что-то документоориентированное couchdb, cassandra. Может быть Redis с его publish/subscribe. 0

@pincet 1654 / 1153 / 173 Регистрация: 23.07.2010 Сообщений: 6,910
	25.01.2018, 14:55
	индексы проектируют исходя из того, какие выборки предполагаются также учитываем, что наличие индекса в сферической СУБД выливается в замедления вставки/обновления данных 0

@Shchusia 43 / 43 / 23 Регистрация: 20.11.2017 Сообщений: 80
	25.01.2018, 15:27 [ТС]
	Meridian21, как вы посоветуете партицировать по хэшу или по id чата цель ускорить отдачу сообщений при пагинации страниц для чатов и диалогов 0