Avanzada 05 · Serie avanzada

Data quality, lineage y reconciliación

Qué dato es correcto y según quién: reconciliación por operación y por totales, late data, backfill y replay idempotente.

3 artículos · ~39 min de lectura
Pilar · empezá acá Avanzado

Cuando la API y el reporte cuentan historias distintas

Pilar de data quality: seis dimensiones, contratos de datos con ownership semántico, lineage de transferencia a reporte, y por qué una diferencia no siempre es un error.

Leer el pilar 12 min

Satélites · profundizan el pilar, en orden

  1. 02

    Reconciliación por operación y por totales

    SQL de reconciliación por transferId y por totales, invariantes de ledger, falsos positivos, tolerancias justificadas, cuarentena y métricas de calidad de datos accionables.

    Avanzado 12 min reconciliacionsqldata-quality
  2. 03

    Tiempo: late data, backfill y replay idempotente

    Event time vs processing time, watermarks y ventanas, backfill idempotente con plan de validación antes y después, runbook, y postmortem ficticio de un incidente de datos.

    Avanzado 15 min late-datawatermarkbackfill
Fundamentos recomendados antes de este capítulo
esc
↑↓ navegar abrir