1. 大数据应用平台建设演进技术沙龙
唐永刚
58大数据部-数据效能部
www.58.com
2. 自我介绍
唐永刚
u
58数据架构师
58大数据部-数据效能部负责人, 58技术委员会数据通道
委员,技术沙龙出品人
u
曾供职于金山软件、奇虎360,在后端和大数据领域深耕
十年以上
3. 58公司介绍
ü是中国最大的可以与本地商家直接接触的服务网络。在全国
建有30多家分公司和500多个网络平台
ü是国内服务种类最多的生活服务平台。服务门类基本覆盖全
部生活场景
ü是国内最大的生活服务类中小商户服务平台之一。平台拥有千万级从事生
活服的务中小微商户,活跃本地商户数量超1000万,付费会员数超340万
ü拥有全国最大的蓝领劳动者从业信息库。平台为上亿的蓝领劳动者提供就
业服务
4. 58大数据平台
58大数据集群是集团统一大数据平台,为公司提供高效、易用、稳定的数据服务,赋能业
务,让数据产生更大价值。
数据涵盖所有子品牌,包括9个重点子品牌58同城、安居客、转转、58同镇、58到家、数
科、驾校一点通、赶集网、中华英才网,业务领域覆盖招聘、房产、汽车、本地生活服务
等。
10000+ 15PB 48W+ 39W+
集群规模 日数据处理规模 接入数据表 日均JOB数
6. 本次沙龙议题
议题一: 58大数据应用平台的实践及演进之路(于涛)
介绍58大数据平台的核心功能与技术架构,以及大数据在数据开发、数据安全、数据治理等方面
的落地实践
背景介绍
议题二: 58大数据任务调度和智能运维实践(张梦龙)
围绕任务分布式、高可用的调度系统技术架构,介绍如何支持并满足大数据任务运行时间长、依赖
复杂、稳定性要求高等特点
议题三: 58敏捷BI系统的设计与实践(张自博)
主要介绍如何从0到1建设SaaS化敏捷BI系统,以及BI系统核心架构是什么,在建设过程中遇到哪
些问题,以及如何解决的