曾文秋
高级技术专家
自我介绍
9年大数据平台研发经验

2011-2018 阿里巴巴 dataworks的技术负责人，负责一站式的
大数据开发平台、工作流任务调度、任务智能监控、数据质量、
数据管理等

2018 加入滴滴，负责滴滴的大数据平台的架构&设计
目录
   l  滴滴大数据发展史

   l  一站式大数据研发中台

   l  核心组件设计剖析

   l  基于研发中台的数据治理实践
滴滴大数据发展史
      稳定性建                一站式平
刀耕火种           烟囱式      一站式平
      设、工具                台(多计算
命令行           发展      台(离线)
       萌芽                 引擎)


2014   2015-2016   2017     2018  2019-2010
同步：sqoop  工单流程     提数工具      一站式平台  一站式平台
调度：cron  提取工具     数据地图      数据同步  离线 ...