数据湖在高途大数据的应用

数据湖在高途大数据的应用

摘要

公司数仓伙伴通过引入数据湖技术，解决了传统Databus同步方案的技术链路长、资源消耗高、时效性低等问题。采用Flink和腾讯数据集成工具，实现了实时数据入湖，提升了数据时效性和资源利用率。同时，通过Amoro工具优化Iceberg表治理，减少小文件对查询性能的影响。智能问答助手降低了运维成本，提升了问题解决效率。未来计划推动湖仓一体应用，为业务提供更精准的数据支持。