爱奇艺数据湖平台建设实践

摘要

存储之上是查询引擎,我们采用 SparkSQL 做 ETL 处理,采用 Trino 做 Ad-hoc 即席查询,ClickHouse 用于查询加速的场景。我们通过 Pilot 提供对外的统一查询,支持各类应用场景。

欢迎在评论区写下你对这篇文章的看法。

评论

Home - Wiki
Copyright © 2011-2024 iteam. Current version is 2.129.0. UTC+08:00, 2024-06-28 02:28
浙ICP备14020137号-1 $Map of visitor$