周子尧-快手一站式BI平台的演进.pdf

《周子尧-快手一站式BI平台的演进.pdf》由会员分享，可在线阅读，更多相关《周子尧-快手一站式BI平台的演进.pdf（41页珍藏版）》请在三个皮匠报告上搜索。

1、快手一站式BI平台的演进主讲人：周子尧领域驱动设计启发下的AI视觉分析引擎构建主讲人：戴 昊演讲嘉宾介绍周子尧目前就职于快手数据平台部，负责分析产品研发方向有7年大数据分析系统研发经验，10多年的互联网产品研发经验曾就职于硅股创业公司，互联网房地产，美团数据科学部有多次从0到1搭建业务或中台的数据分析系统经验关于快手与大数据平台快手数据平台短视频直播电商商业化游戏平台快手数据平台的使命是“提升数据决策效率，利用数据助力业绩提升”万级EB级PB级万级百万级集群规模总数据量日净增数据量日活跃用户数日分析查询数十万级报表数BP平均日活23Q1 3.74亿日均时长23Q1 126.8分钟 电商GMV2

2、3Q1 2248亿 短视频+直播电商，本地生活，招聘，积累驱动快手的使命是“帮助人们发现所需、发挥所长，持续提升每个人独特的幸福感”目录CONTENTS快手BI平台介绍1234快手BI平台的演进与实践快手BI平台的实战案例总结与未来规划快手BI平台介绍1关于商业智能(BI)BI数据战略数据报告数据分析数据探查数据整合数据仓库智能分析产品定位商品定价战略布局制定目标业务动作产品迭代.经营策略商业经营.技术BI（Business Intelligence）即商业智能快手一站式BI平台-KwaiBI整体介绍1.5W+MAU10W+模型数100W+图表数接入业务150+愿景：致力于通过丰富分析工具产品

3、，打造一站式的数据分析平台，提升数据获取与分析效率。10W+报表数快手一站式BI平台-KwaiBI生态体系取数（取数据）SQL取数分析（做分析）可视化（看大数）建门户（经营，业务，部门）自助分析模板取数Notebook指标取数PC看版移动端看板数据大屏推送（推结果）异常监控智能分析PC/移动端KIM推送邮件推送开放集成页面嵌入开放接口数据协同数据集数据建模门户管理业务运营数据准备数据来源大数据存储引擎：CH/Druid/HIVE数据库：Mysql，KV本地数据CSV/Excel指标中台集五大消费场景一体灵活的数据准备服务标准化指标中台应用丰富的开放集成能力线上数据Docs,云文件（嵌入）快手一

4、站式BI平台-KwaiBI核心流程大数据计算和存储数据开发和管理数据源链接数据源管理Step1数据接入Step2 准备数据数据加工数据建模可视化自助分析NotebookAI/MLStep3 分析数据指标管理数据看版大屏数据门户数据推送Step4 消费数据hiveMysqlExcelClickhouse.数据来源BI开放集成数据抽取KwaiBI核心四步骤：数据接入，数据准备，分析数据，消费数据快手BI平台演进与实践2快手一站式BI平台-发展历程2020年-2021年2021年-至今2019年以前按需定制(开源,采购,自研报表)数据来源TableauHUE老报表Superset产品开源 采购简单报

5、表开源 采购简单报表+KwaiBI 1.0 KwaiBI分析产品矩阵规模MAU:3000MAU:8000MAU：1.5w+特点扩展差、体验差，成本高分析能力较弱，运维成本高，定制成本高一站式体验，分析能力强、场景覆盖度高、质量保障强数据来源数据来源快手一站式BI-KwaiBITableauHUEKwaiBI1.0Superset平台化初步建设（KwaiBI1.0 初步完成搭建）分析产品矩阵（通用分析与专题分析）工具化体系化平台化 平台化-背景介绍烟囱式建设HUE简易报表MYSQLHiveMysqlDruid取数报表可视化可视化需求交付专业数据服务团队数据消费用户可视化+取数KwaiBI1.0D

6、ruid.平台化-面临的挑战挑战一：烟囱挑战一：烟囱式开发，导致研发效率低式开发，导致研发效率低，用户体验差，用户体验差KwaiBKwaiBI1.0I1.0、TableauTableau、H Hueue、SupersetSuperset、自研老报表自研老报表、老推送平台老推送平台等等，8 8套套数据工具数据工具并存并存。挑战二：挑战二：分析门槛高，分析效率低分析门槛高，分析效率低需掌握需掌握SQLSQL等技能才能做数据分析等技能才能做数据分析，业务同学不具备业务同学不具备SQLSQL能力，能力，这些需求无这些需求无论大小均交论大小均交由由DEDE完成完成挑战三：数据质量问题多，数据口径难保障挑