01
O job que parou de rodar sem nenhum erro
O código do job era curto e parecia correto: tentar a trava, sair se outra instância a tivesse, processar e liberar num finally. O detalhe que mudou tudo é que as duas chamadas usavam pool.query, e cada pool.query pega qualquer conexão livre. Antes do PgBouncer, o pool do node-postgres com poucas conexões quase sempre devolvia a mesma, e quando não devolvia a conexão ociosa era fechada em 10 segundos, levando a trava junto. O problema existia, mas se curava sozinho.
// Job de conciliação: 3 instâncias, agendado a cada 5 minutos, usando o pool compartilhado.
// Cada pool.query pode cair numa conexão diferente do servidor.
const CHAVE = 'job:conciliacao';
export async function conciliar(pool) {
const { rows } = await pool.query(
'SELECT pg_try_advisory_lock(hashtextextended($1, 0)) AS obtida',
[CHAVE],
);
if (!rows[0].obtida) {
console.info('outra instância já está rodando a conciliação');
return;
}
try {
await processarLote(pool);
} finally {
// O unlock vai para outra conexão: o Postgres responde false e só registra um WARNING.
await pool.query('SELECT pg_advisory_unlock(hashtextextended($1, 0))', [CHAVE]);
}
}
// Postgres log:
// WARNING: you don't own a lock of type ExclusiveLockCom o PgBouncer em modo transação, cada comando fora de BEGIN é uma transação, e cada transação pode ser atendida por uma conexão diferente do servidor. A trava foi obtida na conexão S1; o unlock foi executado na S2. O Postgres respondeu false, registrou um WARNING que ninguém monitorava e a função retornou normalmente. A S1 voltou ao pool segurando a chave, e como o time tinha subido server_lifetime para 24 horas para evitar reconexões, ela continuou viva e ocupada atendendo a API.
- Sintoma 1: o job sai sem erro em todas as instâncias, com a mensagem de que outra está rodando.
- Sintoma 2: pg_locks mostra uma trava advisory concedida a um backend idle que roda consultas de outras rotas.
- Sintoma 3, mais raro e pior: duas instâncias processando o mesmo lote, porque a trava é reentrante dentro da mesma sessão.