Чтение данных из коллекции в 30 млн записей

@ValesKZ · Регистрация: 31.08.2018

Студворк — интернет-сервис помощи студентам

Приветствую уважаемые !
Имеется проблема чтения данных из коллекции.
Размер коллекции 30 млн записей. Коллекция постоянно пополняется примерно на 50-100 записей в секунду. Индексация не помогает. При запросе данных по фильтру сервер подвисает примерно минут на 5.

Запрос:

PHP
1
2
3
4
5
6
7
8
9
10
11
12
13
  $imei  = "352094088867939";
  $date = "270818";
 
     $connection = new Mongo();
     $db = $connection->tracker_repository;
     $collection = $db->t0818;
 
      $criteria = array(
          'tracker' => $imei,
          'date' => $date,
    );
 
    $cursor = $collection->find($criteria);

Подскажите, кто сталкивался с такой ситуацией.

Железо:

Xeon 2CPU x 2.4 Ghz
RAM: 16 Gb
HDD: 2TB
OS: CentOS

@tarasalk · 31.08.2018, 19:38

По highload читали что-нибудь? Шардирование. Отдельные БД для чтения/записи. Кубы.

Новые блоги и статьи Все статьи Все блоги /
Воспроизведение звукового файла с помощью SDL3_mixer при касании экрана Android 8Observer8 26.01.2026 Содержание блога SDL3_mixer - это библиотека я для воспроизведения аудио. В отличие от инструкции по добавлению текста код по проигрыванию звука уже содержится в шаблоне примера. Нужно только. . .	Установка Android SDK, NDK, JDK, CMake и т.д. 8Observer8 25.01.2026 Содержание блога Перейдите по ссылке: https:/ / developer. android. com/ studio и в самом низу страницы кликните по архиву "commandlinetools-win-xxxxxx_latest. zip" Извлеките архив и вы увидите. . .	Вывод текста со шрифтом TTF на Android с помощью библиотеки SDL3_ttf 8Observer8 25.01.2026 Содержание блога Если у вас не установлены Android SDK, NDK, JDK, и т. д. то сделайте это по следующей инструкции: Установка Android SDK, NDK, JDK, CMake и т. д. Сборка примера Скачайте. . .	Использование SDL3-callbacks вместо функции main() на Android, Desktop и WebAssembly 8Observer8 24.01.2026 Содержание блога Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .
моя боль iceja 24.01.2026 Выложила интерполяцию кубическими сплайнами www. iceja. net REST сервисы временно не работают, только через Web. Написала за 56 рабочих часов этот сайт с нуля. При помощи perplexity. ai PRO , при. . .	Модель сукцессии микоризы anaschu 24.01.2026 Решили писать научную статью с неким РОманом	http://iceja.net/ математические сервисы iceja 20.01.2026 Обновила свой сайт http:/ / iceja. net/ , приделала Fast Fourier Transform экстраполяцию сигналов. Однако предсказывает далеко не каждый сигнал (см ограничения http:/ / iceja. net/ fourier/ docs ). Также. . .	http://iceja.net/ сервер решения полиномов iceja 18.01.2026 Выкатила http:/ / iceja. net/ сервер решения полиномов (находит действительные корни полиномов методом Штурма). На сайте документация по API, но скажу прямо VPS слабенький и 200 000 полиномов. . .

@tarasalk 1992 / 1216 / 440 Регистрация: 13.06.2013 Сообщений: 4,115
	31.08.2018, 19:38
	По highload читали что-нибудь? Шардирование. Отдельные БД для чтения/записи. Кубы. 0