Migração de Batch Diário para Streaming em Tempo Real com Delta Lake e Kafka
bolt Latência reduzida de 8 horas para 45 segundos em risco de crédito e prevenção a fraudes
Processamento analítico baseado em jobs batch overnight em SQL Server gerava janela cega de 8 horas na precificação de risco e combate à fraude, resultando em falsos positivos na aprovação de crédito e exposição a prejuízos.
Implementação de pipeline orientado a eventos com Apache Kafka distribuído e ingestão contínua em arquitetura Medallion (Delta Lake) no Databricks, alimentado por Change Data Capture (CDC Debezium) com semântica Exactly-Once.