Automated Schema Evolution in Pinterest’s Next-Generation DB Ingestion Framework

Automated Schema Evolution in Pinterest’ s Next-Generation DB Ingestion Framework

摘要

Pinterest 的 CDC 管道通过分阶段收敛模型安全处理模式演变，支持添加列等兼容变更。系统自动检测源模式变化，更新 Iceberg、Flink 和 Spark 代码，并通过 PR 工作流部署，确保数据在 SLA 内逐步一致。