货拉拉大数据新一代基础架构实践与思考

摘要

团队开发的离线混合引擎服务在解决查询速度慢的问题方面表现出色。它通过多引擎路由和自动降级的方式,将SQL路由到最适合的计算引擎上,保证了执行的成功率。系统还实现了多引擎的兼容性,对Presto进行改造,达到了84%的兼容率。数据质量方面,系统进行了多引擎数据对比,保证了100%的通过数据质量校验。此外,团队还计划进一步完善离线混部策略,探索流批一体和湖仓一体的落地场景。

欢迎在评论区写下你对这篇文章的看法。

评论

首页 - Wiki
Copyright © 2011-2024 iteam. Current version is 2.124.0. UTC+08:00, 2024-05-02 10:36
浙ICP备14020137号-1 $访客地图$