Несколько COUNT(*) в одном часто выполняемом запросе

@artemshumil · Регистрация: 13.09.2017

Студворк — интернет-сервис помощи студентам

Приветствую! Существует такая проблема: есть таблица с ~30000 записей. В ней надо каждые несколько секунд считать количества записей с определенным набором параметров, состоящим из 2х столбцов: state и user. Притом вариантов state - 15, user - 20, а считаются только сегодняшние, максимум - позавчерашние, записи. В течение минуты обновляется информация примерно в 10 строках и добавляется около 5. Сейчас это делается запросом с 15 вложенными SELECT COUNT(*), который выполняется ~0,2 секунды.
Собственно вопрос: как это можно оптимизировать?

@qwertehok · 13.09.2017, 13:19

запрос покажите

@artemshumil · 13.09.2017, 13:40 **[ТС]**

MySQL
1
2
3
4
5
6
7
8
9
10
11
12
SELECT ( SELECT COUNT(*) FROM `requests` WHERE (`date` = CURDATE() or `date` = '2017-09-12') and `del` <> 'hide' and ((`userID` = '' and (`state` = 'neobr' ) and  `state` <> 'brak') or (`userID` <> '' and `checkMoscow` = 'region' and state = 'neobr'))) as `allNeobr`,
(SELECT COUNT(*) FROM `requests` WHERE `state` = 'prihod' and `del` = '' and `rdate` = CURDATE()  and `requests`.`userID` = "" ) as `allPrihod`, 
(SELECT COUNT(*) FROM `requests` WHERE `state` IN('zapis', 'podtverjden') and `del` = '' and `rdate` = CURDATE()  and `requests`.`userID` = "" ) as `allZapis`,
(SELECT COUNT(*) FROM `requests` WHERE `state` = 'sliv' and `rdate` = CURDATE() and `del` = ''  and `requests`.`userID` = "" ) as `allSliv`,
(SELECT COUNT(*) FROM `balance_minus` WHERE `date` = CURDATE() and `money` = '400') as `allPartner`,
(SELECT COUNT(`requests`.`id`) FROM  `requests` INNER JOIN `crm_users_night` ON `requests`.`userID` =  `crm_users_night`.`ID` WHERE `crm_users_night`.`gorod`<>'Москва МО') as `allPartnerReg`,
(SELECT COUNT(*) FROM `requests` WHERE `state` = 'sozvon' and `rdate` = CURDATE() and `del` = ''  and `requests`.`userID` = "" ) as `allSozvon`,
(SELECT COUNT(*) FROM `requests` WHERE `state` = 'brak' and `date` = CURDATE() and `del` = ''  and `requests`.`userID` = "" ) as `allBrak`,
(SELECT COUNT(*) FROM `requests` WHERE `state` = 'nedozvon' and `date` = CURDATE() and `del` = ''  and `requests`.`userID` = "" ) as `allNedozvon`,
(SELECT COUNT(*) FROM `requests` WHERE `state` = 'bk' and `date` = CURDATE() and `del` = ''  and `requests`.`userID` = "" ) as `allBk`,
(SELECT COUNT(*) FROM `requests` WHERE `state` = 'vtorich' and `date` = CURDATE() and `del` = ''  and `requests`.`userID` = "" ) as `allVtorich`,
(SELECT COUNT(*) FROM `requests` WHERE `date` = CURDATE()    and `del` = '') as `allCount`

Это запрос в общем случае, для пользователей не с административными правами доступа в каждый WHERE будет добавлено условие AND operatorID = <ID>

@qwertehok · 13.09.2017, 13:56

Сообщение от artemshumil

Собственно вопрос: как это можно оптимизировать?

1. выгружать данные за текущую дату в отдельную таблицу
2. сделать справочник state

@artemshumil · 13.09.2017, 14:48 **[ТС]**

1. Выгружать данные за текущую дату не выйдет, так как они постоянно обновляются, соответственно выгрузка будет очень частой, а использовать однодневную таблицу как основную не вариант - иногда всплывают старые данные
2. справочник только по state сделать не получится: либо за другими полями придется лезть в основную таблицу, либо делать справочник из 8 полей ( а в нем быстродействие точно такое же )

@qwertehok · 13.09.2017, 14:57

Сообщение от artemshumil

так как они постоянно обновляются

каждый раз когда ты лезешь за новыми данными ты
1. очищаешь таблицу
2. грузишь в нее новые данные
3. считаешь по этой таблице

это быстрее чем считать по общей

Сообщение от artemshumil

справочник только по state сделать не получится: либо за другими полями придется лезть в основную таблицу

для этого справочник и нужен!!!
ты заменишь свои текстовые сравнения на индексированные числовые и это будет быстрее

Новые блоги и статьи Все статьи Все блоги /
Как дизайн сайта влияет на конверсию: 7 решений, которые реально повышают заявки Neotwalker 08.03.2026 Многие до сих пор воспринимают дизайн сайта как “красивую оболочку”. На практике всё иначе: дизайн напрямую влияет на то, оставит человек заявку или уйдёт через несколько секунд. Даже если у вас. . .	Модульная разработка через nuget packages DevAlt 07.03.2026 Сложившийся в . Net-среде способ разработки чаще всего предполагает монорепозиторий в котором находятся все исходники. При создании нового решения, мы просто добавляем нужные проекты и имеем. . .	Модульный подход на примере F# DevAlt 06.03.2026 В блоге дяди Боба наткнулся на такое определение: В этой книге («Подход, основанный на вариантах использования») Ивар утверждает, что архитектура программного обеспечения — это структуры,. . .	Управление камерой с помощью скрипта OrbitControls.js на Three.js: Вращение, зум и панорамирование 8Observer8 05.03.2026 Содержание блога Финальная демка в браузере работает на Desktop и мобильных браузерах. Итоговый код: orbit-controls-threejs-js. zip. Сканируйте QR-код на мобильном. Вращайте камеру одним пальцем,. . .
SDL3 для Web (WebAssembly): Синхронизация спрайтов SDL3 и тел Box2D 8Observer8 04.03.2026 Содержание блога Финальная демка в браузере. Итоговый код: finish-sync-physics-sprites-sdl3-c. zip На первой гифке отладочные линии отключены, а на второй включены:. . .	SDL3 для Web (WebAssembly): Идентификация объектов на Box2D v3 - использование userData и событий коллизий 8Observer8 02.03.2026 Содержание блога Финальная демка в браузере. Итоговый код: finish-collision-events-sdl3-c. zip Сканируйте QR-код на мобильном и вы увидите, что появится джойстик для управления главным героем. . . .	Реалии Hrethgir 01.03.2026 Нет, я не закончил до сих пор симулятор. Эта задача сложнее. Не получилось уйти в плавсостав, но оно и к лучшему, возможно. Точнее получалось - но сварщиком в палубную команду, а это значит, в моём. . .	Ритм жизни kumehtar 27.02.2026 Иногда приходится жить в ритме, где дел становится всё больше, а вовлечения в происходящее — всё меньше. Плотный график не даёт вниманию закрепиться ни на одном событии. Утро начинается с быстрых,. . .

@artemshumil 0 / 0 / 0 Регистрация: 13.09.2017 Сообщений: 3

	Несколько COUNT() в одном часто выполняемом запросе 13.09.2017, 12:35. Показов* 1662. Ответов 5 Метки mysql, количество, оптимизация (Все метки) Приветствую! Существует такая проблема: есть таблица с ~30000 записей. В ней надо каждые несколько секунд считать количества записей с определенным набором параметров, состоящим из 2х столбцов: state и user. Притом вариантов state - 15, user - 20, а считаются только сегодняшние, максимум - позавчерашние, записи. В течение минуты обновляется информация примерно в 10 строках и добавляется около 5. Сейчас это делается запросом с 15 вложенными SELECT COUNT(*), который выполняется ~0,2 секунды. Собственно вопрос: как это можно оптимизировать? 0

@qwertehok 5975 / 4550 / 1095 Регистрация: 29.08.2013 Сообщений: 28,169 Записей в блоге: 3
	13.09.2017, 13:19
	запрос покажите 0

@artemshumil 0 / 0 / 0 Регистрация: 13.09.2017 Сообщений: 3
	13.09.2017, 14:48 [ТС]
	1. Выгружать данные за текущую дату не выйдет, так как они постоянно обновляются, соответственно выгрузка будет очень частой, а использовать однодневную таблицу как основную не вариант - иногда всплывают старые данные 2. справочник только по state сделать не получится: либо за другими полями придется лезть в основную таблицу, либо делать справочник из 8 полей ( а в нем быстродействие точно такое же ) 0