Rebuilding Uber’s Apache Pinot™ Query Architecture

Rebuilding Uber’ s Apache Pinot™ Query Architecture

摘要

Uber基于Apache Pinot™构建的实时分析平台支撑了海量关键业务，但原有Neutrino查询架构存在语义复杂、资源隔离不足等问题。通过创新推出Pinot多阶段引擎精简模式（MSE Lite Mode），在保留复杂SQL功能的同时，通过记录数限制和分散-聚集执行模式保障系统稳定性。新架构采用轻量级代理Cellar，支持原生PinotSQL查询，实现了更简明的语义模型和真正的端到端资源隔离。目前新架构已承载20%的查询流量，未来将逐步替代Neutrino，持续提升OLAP系统能力。