关于大规模实时数仓搭建,我有几条心得...
摘要
闲鱼作为一款闲置交易APP,在二手交易市场中是当之无愧的佼佼者。闲鱼从2014年诞生到现在七整年间持续增长,在这高速增长的背后带来的是每天近百亿的曝光点击浏览等数据,在这些数据规模如此庞大的背后也会带来诸多关于实时性的问题:
•用户反馈商品曝光异常,如何快速定位?
•产品同学圈了一批商品,如何查看该样本的实时报表?
•发现问题总是晚一步,如何在第一时间获取自定义的预警信息?
•......
为了解决上述的这些问题,我们开始了打造闲鱼实时数仓的探索之路。