Skip to content
Docs

This page has not been translated yet — you are reading the Portuguese version. View in Portuguese

PreviewUpdated on 2026-09-08

Troubleshooting: pipeline e schema

Catálogo sintoma → causa → diagnóstico → solução → prevenção para ingestão, pipeline medalhão (bronze/silver/gold), retry/DLQ, watermark e mudanças de schema.

On this page (4)

Selo de estado: Preview — catálogo de diagnóstico para ingestão, pipeline medalhão e schema. Atualizado em 2026-09-08.

O pipeline segue o padrão medalhão: Bronze (bruto) → Silver (limpo) → Gold (mart publicado). A execução é assíncrona, idempotente, com retry/backoff e DLQ — ver Pipeline medalhão e Agendamento, retry e DLQ.

SintomaCausa provávelDiagnósticoSoluçãoPrevenção
Pipeline "preso" em runningjob travado / dependência lentaveja a Auditoria (categoria Pipeline) e o horário do runaguarde a reconciliação; reprocesse a fontemonitore runs longos; divida cargas grandes
Execução marcada como failedfonte indisponível ou dado malformadoexpanda o detalhe do run (erro registrado)corrija a fonte e reexecutevalide "Testar conexão" antes de agendar
Run reprocessado sem duplicaridempotência do pipelineesperado (retry seguro)nada a fazerconfie no retry/backoff em vez de re-disparar manualmente
Fonte "vazia" num diaorigem sem dados na janelaconfira a origem no períodoreexecute quando a origem tiver dadosalerta de freshness na camada Gold
Incremental não traz linhas novaswatermark já avançou além do dadoconfira a coluna de watermarkrode backfill da janela necessáriaescolha uma coluna de watermark monotônica
Esperava CDC (updates/deletes)CDC verdadeiro é Roadmapincremental é por watermarkuse watermark + backfill; deletes não são capturadosver Ingestão incremental
Coluna nova na origem não apareceuschema drift não propagadocompare o schema da fonte com o Bronzereexecute a descoberta/carga da fontepadronize o schema na origem
Tipo de coluna mudou e quebrou Silver/Goldmudança de tipo incompatívelveja o erro da transformaçãoajuste a transformação/tipo esperadoevite mudar tipos na origem sem aviso
STRUCT/RECORD ou array não sai no feedcolunas aninhadas não publicadasconfira o schema da tabela Goldpublique colunas planas nos martsmodele Gold com colunas planas
Job cai por custoatingiu o teto de volume por consultaveja o custo/erro do runreduza o escopo/particione a fontever Custo e performance

Diagnóstico rápido#

  1. Abra a Auditoria, filtre categoria Pipeline e o período.
  2. Localize o run e expanda o detalhe (erro/observação).
  3. Cruze com a fonte (a origem tinha dados na janela?) e com o watermark.

Resultado esperado após a correção#

  • O run volta a success, o Bronze recebe as linhas, e Silver/Gold materializam sem erro. O feed/dashboard passa a refletir o novo dado.

Relacionados#


Última revisão: 2026-09-08. Estado: ingestão/pipeline em Preview; CDC = Roadmap (incremental por watermark). Fonte: matriz de estados do produto.

Related links