Я пытаюсь лучше понять, как работает планировщик запросов в postgresql.
У меня есть этот запрос:
select id from users
where id <> 2
and gender = (select gender from users where id = 2)
order by latest_location::geometry <-> (select latest_location from users where id = 2) ASC
limit 50
Он работает менее чем за 10 мс в моей базе данных с около 500 000 записей в таблице пользователей.
Затем я подумал, что во избежание дублирования вложенных элементов я мог бы переписать запрос как CTE, например так:
with me as (
select * from users where id = 2
)
select u.id, u.popularity from users u, me
where u.gender = me.gender
order by u.latest_location::geometry <-> me.latest_location::geometry ASC
limit 50;
Однако этот переписанный запрос выполняется примерно за 1 секунду! Почему это происходит? Я вижу в объяснениях, что он не использует индекс геометрии, но можно ли что-нибудь сделать для этого? Спасибо!
Другой способ написать запрос:
select u.id, u.popularity from users u, (select gender, latest_location from users where id = 2) as me
where u.gender = me.gender
order by u.latest_location::geometry <-> me.latest_location::geometry ASC
limit 50;
Тем не менее, это также будет так же медленно, как CTE.
С другой стороны, если я извлекаю параметры me и вставляю их статически, запрос снова выполняется быстро:
select u.id, u.popularity from users u
where u.gender = 'male'
order by u.latest_location::geometry <-> '0101000000A49DE61DA71C5A403D0AD7A370F54340'::geometry ASC
limit 50;
Объяснить первый (быстрый) запрос
Limit (cost=5.69..20.11 rows=50 width=36) (actual time=0.512..8.114 rows=50 loops=1)
InitPlan 1 (returns $0)
-> Index Scan using users_pkey on users users_1 (cost=0.42..2.64 rows=1 width=32) (actual time=0.032..0.033 rows=1 loops=1)
Index Cond: (id = 2)
InitPlan 2 (returns $1)
-> Index Scan using users_pkey on users users_2 (cost=0.42..2.64 rows=1 width=4) (actual time=0.009..0.010 rows=1 loops=1)
Index Cond: (id = 2)
-> Index Scan using users_latest_location_gix on users (cost=0.41..70796.51 rows=245470 width=36) (actual time=0.509..8.100 rows=50 loops=1)
Order By: (latest_location <-> $0)
Filter: (gender = $1)
Rows Removed by Filter: 20
Total runtime: 8.211 ms
(12 rows)
Объясните второй (медленный) запрос
Limit (cost=62419.82..62419.95 rows=50 width=76) (actual time=1024.963..1024.970 rows=50 loops=1)
CTE me
-> Index Scan using users_pkey on users (cost=0.42..2.64 rows=1 width=221) (actual time=0.037..0.038 rows=1 loops=1)
Index Cond: (id = 2)
-> Sort (cost=62417.18..63030.86 rows=245470 width=76) (actual time=1024.959..1024.963 rows=50 loops=1)
Sort Key: ((u.latest_location <-> me.latest_location))
Sort Method: top-N heapsort Memory: 28kB
-> Hash Join (cost=0.03..54262.85 rows=245470 width=76) (actual time=0.122..938.131 rows=288646 loops=1)
Hash Cond: (u.gender = me.gender)
-> Seq Scan on users u (cost=0.00..49353.41 rows=490941 width=48) (actual time=0.021..465.025 rows=490994 loops=1)
-> Hash (cost=0.02..0.02 rows=1 width=36) (actual time=0.054..0.054 rows=1 loops=1)
Buckets: 1024 Batches: 1 Memory Usage: 1kB
-> CTE Scan on me (cost=0.00..0.02 rows=1 width=36) (actual time=0.047..0.049 rows=1 loops=1)
Total runtime: 1025.096 ms
FROM
вместо термина CTE для достижения наилучших результатов.(select id, latest_location from users where id = 2)
делать, если вы используете в качестве cte? Может быть, это *, что вызывает эту проблемуОтветы:
Попробуй это:
Когда я смотрю на быстрый план, вот что выскакивает из меня (выделено жирным шрифтом):
В медленной версии планировщик запросов оценивает оператор равенства
gender
и оператор геометрииlatest_location
в контексте объединения , где значениеme
может варьироваться в зависимости от каждой строки (даже если оно правильно оценило только 1 строку). В быстрой версии значенияgender
иlatest_location
обрабатываются как скаляры, поскольку они отправляются встроенными подзапросами, что говорит планировщику запросов, что он имеет только одно значение для каждого. Это та же самая причина, по которой вы получаете быстрый план при вставке литеральных значений.источник
me
изfrom
пункта сейчас.