面向数据融合的贝壳数据架构的演进

面向数据融合的贝壳数据架构的演进

摘要

贝壳找房在数据架构上持续演进，从稳定性保障到成本优化，再到面向AI的数据平台建设。通过Hadoop升级、存算分离、EC技术应用等，提升了数据处理效率和存储利用率。针对大模型训练，贝壳自研了KeFlashCheckpoint，优化GPU利用率，确保训练稳定性。未来将继续探索数据智能融合架构，推动数据与AI的高效协同。