Долгое выполнение EXPLAIN

shmkv · Регистрация: 21.07.2015

Студворк — интернет-сервис помощи студентам

Вопрос скорее теоретический. Имеется БД на pg 12.3 внушительного размера (десятки ТБ). Выполняю EXPLAIN ... (без ANALYZE) и ожидаю увидеть план запроса, но получаю я его минут через 5. Из-за чего такое может произойти? Я даже не знаю в какую сторону копать, т.к. EXPLAIN на EXPLAIN не работает. Иногда помогает разбитие одного сложного запроса на 2 более простых, тогда EXPLAIN выполняется мгновенно.

@grgdvo · 10.04.2023, 22:32

Сколько таблиц под FROM/JOIN в искомом запросе??
Меняли ли значения параметров from_collapse_limit и join_collapse_limit??

shmkv · 11.04.2023, 11:16 **[ТС]**

Сообщение от grgdvo

Сколько таблиц под FROM/JOIN в искомом запросе??

Две. Вторая подключается через JOIN или как вложенный запрос. Эффект примерно одинаковый.

SQL
1
EXPLAIN SELECT image, mode, roi FROM replicator_mapping INNER JOIN t_image USING (tid) WHERE db_id = '57' AND original_tid = 16164617

Если разбить на два отдельных запроса, то они выполняются мгновенно.

Сообщение от grgdvo

Меняли ли значения параметров from_collapse_limit и join_collapse_limit??

Нет. Я вообще не люблю менять дефолтные параметры, разве что размеры буферов под железо.

У меня есть подозрение, что виной всему поломанные индексы. Это косвенно стало понятно, что выполнение MIN по индексированной колонке также повисает надолго (при этом MAX почти мгновенно и есть значения начиная с которого в условиях сравнения зависает explain). Попробую переиндексировать. Но все это только для одной таблице. В другой вроде бы ничего такого не наблюдается с индексами, но explain тоже повисает. Но переиндексирую все.

Добавлено через 34 минуты
Посмотрел лог, спам ошибки ERROR: column c.relhasoids does not exist at character 245
Эта ошибка не связана с проблемой. libpq на каком-то клиенте старая.

@grgdvo · 11.04.2023, 22:01

Напишите, что получилось после переиндексирования.
Вероятно стоит еще статистику по таблицам обновить: ANALYZE или VACUUM ANALYZE.
Надо заметить, что EXPLAIN не выполняет запрос, только строит наилучший план, выбирая из кандидатов.

Редко, но происходят такие вопросы к Постгрес, и каждый раз не находится какой-то стабильной причины, почему это происходит и что точно помогает. Причем как на сложных так и на простых запросах. Очень трудноуловимая и воспроизводимая ошибка. У кого-то происходит, берешь копию данных себе на исследование - не проявляется.

shmkv · 12.04.2023, 19:53 **[ТС]**

Причина действительно оказалась в поломанных индексах. Видимо explain их использует для выбора плана запроса.

Новые блоги и статьи Все статьи Все блоги /
Отчёт о затраченных материалах за определенный период с макетом печатной формы Maks 21.04.2026 Отчёт из решения ниже размещён в конфигурации КА2. Задача: разработка отчёта по затраченным материалам за определённый период, с возможностью вывода печатной формы отчёта с шапкой и подвалом. В. . .	Отчёт о спецтехнике находящейся в ремонте Maks 20.04.2026 Отчёт из решения ниже размещен в конфигурации КА2. Задача: отобразить спецтехнику, которая на данный момент находится в ремонте. Есть нетиповой документ "Заявка на ремонт спецтехники" который. . .	Памятка для бота и "визитка" для читателей "Semantic Universe Layer (Слой семантической вселенной)" Hrethgir 19.04.2026 Сгенерировано для краткого описания по случаю сборки и компиляции скелета серверного приложения. И пусть после этого скажут, что статьи сгенерированные AI - туфта и не интересно. И это не реклама -. . .	Запрет удаления строк ТЧ документа при определённом условии Maks 19.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа "Аккумуляторы", разработанного в конфигурации КА2. У данного документа есть ТЧ, в которой в зависимости от прав доступа. . .
Модель заражения группы наркоманов alhaos 17.04.2026 Условия задачи сформулированы тут Суть: - Группа наркоманов из 10 человек. - Только один инфицирован ВИЧ. - Колются одной иглой. - Колются раз в день. - Колются последовательно через. . .	Мысли в слух. Про "навсегда". kumehtar 16.04.2026 Подумалось тут, что наверное очень глупо использовать во всяких своих установках понятие "навсегда". Это очень сильное понятие, и я только начинаю понимать край его смысла, не смотря на то что давно. . .	My Business CRM MaGz GoLd 16.04.2026 Всем привет, недавно возникла потребность создать CRM, для личных нужд. Собственно программа предоставляет из себя базу данных клиентов, в которой можно фиксировать звонки, стадии сделки, а также. . .	Знаешь почему 90% людей редко бывают счастливыми? kumehtar 14.04.2026 Потому что они ждут. Ждут выходных, ждут отпуска, ждут удачного момента. . . а удачный момент так и не приходит.

shmkv 1378 / 522 / 72 Регистрация: 21.07.2015 Сообщений: 1,308

	Долгое выполнение EXPLAIN 10.04.2023, 19:55. Показов 907. Ответов 4 Метки нет (Все метки) Вопрос скорее теоретический. Имеется БД на pg 12.3 внушительного размера (десятки ТБ). Выполняю EXPLAIN ... (без ANALYZE) и ожидаю увидеть план запроса, но получаю я его минут через 5. Из-за чего такое может произойти? Я даже не знаю в какую сторону копать, т.к. EXPLAIN на EXPLAIN не работает. Иногда помогает разбитие одного сложного запроса на 2 более простых, тогда EXPLAIN выполняется мгновенно. 0

@grgdvo 1267 / 980 / 385 Регистрация: 02.09.2012 Сообщений: 3,027
	10.04.2023, 22:32
	Сколько таблиц под FROM/JOIN в искомом запросе?? Меняли ли значения параметров from_collapse_limit и join_collapse_limit?? 0

@grgdvo 1267 / 980 / 385 Регистрация: 02.09.2012 Сообщений: 3,027
	11.04.2023, 22:01
	Напишите, что получилось после переиндексирования. Вероятно стоит еще статистику по таблицам обновить: ANALYZE или VACUUM ANALYZE. Надо заметить, что EXPLAIN не выполняет запрос, только строит наилучший план, выбирая из кандидатов. Редко, но происходят такие вопросы к Постгрес, и каждый раз не находится какой-то стабильной причины, почему это происходит и что точно помогает. Причем как на сложных так и на простых запросах. Очень трудноуловимая и воспроизводимая ошибка. У кого-то происходит, берешь копию данных себе на исследование - не проявляется. 0

shmkv 1378 / 522 / 72 Регистрация: 21.07.2015 Сообщений: 1,308
	12.04.2023, 19:53 [ТС]
	Причина действительно оказалась в поломанных индексах. Видимо explain их использует для выбора плана запроса. 0

Опции темы