01
A importação que deixou o relatório do cliente novo 1.698 vezes errado
O sintoma confunde porque afeta só uma parte dos dados. Os clientes antigos continuavam com relatórios rápidos, e o time começou procurando problema no volume do cliente novo, no tamanho do arquivo importado ou em lock deixado pela carga. A pista certa só apareceu quando alguém comparou, no EXPLAIN ANALYZE, a coluna rows estimada com a real.
D0 22:10 importação do cliente novo (cliente_id 9123): 3.912.455 pedidos via COPY
pedidos tinha 40,1 milhões de linhas
limite de autoanalyze: 50 + 0,1 x 40.100.000 = 4.010.050 linhas modificadas
n_mod_since_analyze depois da carga: 3.912.455 -> abaixo do limite
D0 23:00 job de consolidação do cliente 9123: cancelado por statement_timeout (15 min)
D1 08:30 relatório de vendas por SKU do cliente: carregando até o timeout do gateway
D1 14:20 EXPLAIN ANALYZE: estimado rows=2304, real rows=3.912.455 (1.698 vezes mais)
D1 14:26 ANALYZE pedidos (11 s) -> o mesmo relatório em 48 s, com hash join
D2 05:40 autoanalyze roda sozinho, quando as escritas normais do dia passam do limiteEXPLAIN (ANALYZE, BUFFERS)
SELECT i.sku, sum(i.quantidade) AS unidades, sum(i.total) AS receita
FROM pedidos p
JOIN pedido_itens i ON i.pedido_id = p.id
WHERE p.cliente_id = 9123
GROUP BY i.sku;
-- Antes do ANALYZE: o planejador espera 2.304 linhas e escolhe nested loop.
-- Real: 3.912.455 linhas, e o índice de pedido_itens é consultado 3,9 milhões de vezes.
HashAggregate (rows=2304) (actual time=2463102.338..2463551.244 rows=48211 loops=1)
-> Nested Loop (rows=6912) (actual time=0.061..2461308.114 rows=11734870 loops=1)
-> Index Scan using pedidos_cliente_idx on pedidos p
(rows=2304) (actual time=0.031..9120.556 rows=3912455 loops=1)
Index Cond: (cliente_id = 9123)
-> Index Scan using pedido_itens_pedido_idx on pedido_itens i
(rows=3) (actual time=0.412..0.624 rows=3 loops=3912455)
Index Cond: (pedido_id = p.id)
Execution Time: 2463551.870 ms
-- Depois do ANALYZE: estimativa na ordem certa e hash join.
HashAggregate (rows=51000) (actual time=47920.114..48102.630 rows=48211 loops=1)
-> Hash Join (rows=11790000) (actual time=3412.880..44016.301 rows=11734870 loops=1)
Hash Cond: (i.pedido_id = p.id)
-> Seq Scan on pedido_itens i (rows=131200000) (actual ... rows=131184020 loops=1)
-> Hash (rows=3930000) (actual ... rows=3912455 loops=1)
-> Index Scan using pedidos_cliente_idx on pedidos p (rows=3930000) ...
Execution Time: 48102.630 msO plano ruim não é um defeito do planejador. Para 2.304 pedidos, buscar os itens de cada um pelo índice é de fato a escolha mais barata. O problema é que ele decidiu com uma fotografia da tabela tirada antes da importação, quando o cliente 9123 não existia. Estimativa errada por três ordens de grandeza é sempre o primeiro suspeito quando uma consulta que não mudou fica lenta logo depois de uma carga.