Download - 数据分析组14 15
![Page 1: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/1.jpg)
Analytics Team 2014
![Page 2: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/2.jpg)
团队和成员介绍• 数据分析团队隶属于 Leap.as云计算团队,负责数据分析,数据挖掘,智能推荐系统的开发和运维。• 团队现有主要成员:韦先敢,谭杨,蔡伟伟,卜赫
![Page 3: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/3.jpg)
韦先敢• 又名韦少• 85后• 负责离线数据分析架构设计,运维,具体业务实现, 1.x UserTask系统维护• 特长,各种运动,唱歌,架构设计
![Page 4: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/4.jpg)
谭杨• 90后• 负责实时数据分析框架设计和实现,具体业务实现• 特长,跳舞,新技术调研
![Page 5: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/5.jpg)
蔡伟伟• 85后• 目前负责离线数据分析重要模块方案设计,实现• 特长,新技术调研,架构设计
![Page 6: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/6.jpg)
卜赫• 85后• 负责需求分析,打杂,卖萌
![Page 7: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/7.jpg)
2014 回顾• 2014-01 Leap.as 数据分析团队成立,与此同时进行验证性开发,开发了 Snake的第一个原型版本,满足了交叉推广效果分析的需求实现。
![Page 8: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/8.jpg)
2014 回顾• 2014-03 团队开始对基础存储进行选型,确定开发基于 ElasticSearch的 Cassnadra二级索引项目 Casses,在进行了基准测试后正式使用。
![Page 9: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/9.jpg)
2014 回顾• 2014-04 团队完善并实现了 Snake的第一个发布版本,实现了基于 SQL语义的实时分析快速开发框架。
![Page 10: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/10.jpg)
2014 回顾• 2014-05 团队参考多个数据分析平台,结合自身的资源和优势,开始开发 App Analytics
2.0版本。确定基础架构和项目需求。
![Page 11: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/11.jpg)
2014 回顾• 2014-07 App Analytics 2.0版本上线,实现了竞品的 60%功能,完成了包括离线和实时计算部分的基础数据分析。
![Page 12: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/12.jpg)
2014 回顾• 2014-09 App Analytics 2.1版本上线,迁移到
Vert.x平台,并对项目结构进行了重构和拆分,实现了基于 Casses的类 SQL的聚合和分组引擎,增加 PageView,Event等高级功能。
![Page 13: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/13.jpg)
2014 回顾• 2014-10 App Analytics 2.2版本上线,对离线计算部分进行了优化,提高了计算的准确性和实效性,提供了对因机器故障或人为因素造成的数据错误和遗漏进行补采、补算的重要增强,支持对更大粒度 (周、月 )的数据分析。重构了 Snake的 Sever部分,发布了第一个带有 Snake UI的版本,极大的方便了实时分析的开发和运维。
![Page 14: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/14.jpg)
2014 回顾• 2014-11 App Analytics 2.2.1版本上线,重构
Snake项目的引擎( Core)部分,提高了计算性能。提供了事件漏斗, Ad分析, API用量分析等高级功能。
![Page 15: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/15.jpg)
2014 回顾• 2014-12 App Analytics 2.2.2版本开发,重构了 ETL部分,提供了 Event统计和限制功能。
![Page 16: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/16.jpg)
2014 回顾• 目前正在开发非常灵活、跨系统的 Segment定义和计算功能,监控系统的选型和搭建,持久化 View的开发和测试。
![Page 17: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/17.jpg)
2014 回顾• 我们经历过线上丢数据的灾难
![Page 18: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/18.jpg)
2014 回顾• 我们经历过人员调整的痛楚
![Page 19: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/19.jpg)
2014 回顾• 我们经历过定位线上问题时的紧张和忐忑
![Page 20: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/20.jpg)
2014 回顾• 我们经历过压力大、时间紧的上线挑战
![Page 21: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/21.jpg)
2014 回顾• 我们也一起在 TB中忘情豪饮,无所不谈
![Page 22: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/22.jpg)
2014 回顾• 我们更体味了和团队一起成长的温馨和喜悦
![Page 23: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/23.jpg)
2015
• 我们会进一步完善 App Analytics这个产品• 后续会陆续推出:• 针对游戏分析的 Game Analytics产品• 针对核心用户分析的 User Recommend产品,帮助用户了解用户,理解用户,创造价值。
![Page 24: 数据分析组14 15](https://reader036.vdocuments.site/reader036/viewer/2022081521/58d0ea8d1a28abba558b5e2b/html5/thumbnails/24.jpg)
特别感谢(不分先后)• 郑济群• 马山虎• 周和生• 黄赐印• 秦鹏• 周岑• 徐洪福• 孙进