多云缓存在知乎的探索：从 UnionStore 到 Alluxio

多云缓存在知乎的探索：从 UnionStore 到 Alluxio

摘要

知乎采用多云架构，通过在线机房和离线机房的专线连接来实现算法模型的跨机房读取。早期，为解决专线带宽打满的问题，知乎部署了一套新的在线HDFS集群供算法业务使用。该架构解决了专线流量问题，但引入了维护困难和拷贝脚本实现的问题。将模型从离线HDFS集群拷贝至在线集群的过程需要业务自己实现，增加了运维负担。