京东 one-service 数据服务体系建设.pdf

1、DataFunSummit#2023京东One-Service数据服务体系建设周慧通-京东集团-技术研发与数据中心01 昨天02 今天03 明天04 致谢目录CONTENTDataFunSummit#202301昨天数据服务发展需求驱动烟囱式满足业务场景解决业务痛点第一阶段第二阶段第三阶段主题服务以主题为系统边界各司其职主题化定义驱动生产数据资产一体化平台One-Service服务一体化主题化服务主题化服务实践-融合服务主题化服务实践-融合服务1代码模板化2数据配置化3指标融合化4缓存粒度化通过定义基础模板，实现基础服务查询通过重写基础模板，实现自定义服务查询将依赖的表、数据源、缓存时间等动态

2、配置将指标、维度信息代码配置化通过服务拆解，支持不同集群、不同业务的各种指标一次性查询支持年/月/日/小时/秒粒度查询拆解独立缓存支持维度分析粒度拆解并独立缓存技术效能-服务是否真正服务于业务指标口径不统一服务协议不统一01.标准化非标准带来差异参数和链路，服务如何保证稳定性04.稳定性大量的数据资产无法得到充分复用，且存在重复建设02.资产化技术迭代无法加速业务上线05.研发周期模板化与复杂业务的融合并没有达到预期效果03.模板化是否存在一个服务可覆盖上述所有？06.可能性DataFunSummit#202301今天资产构建的基石-数据模型标准WHEREWHATWHOWHENHOW MUCH

3、WHYHOW数据标准5W2H数据模型标准示例资产构建的基石-指标标准WHEREWHATWHOWHYHOW指标标准4W1H指标市场-资产化管理平台01指标注册02指标管理03指标接入04指标巡检05指标路由维度中心-标准化分析视角维度中心标准化输入标准化输出定义驱动生产-数据查询能力同环比动态过滤动态修饰动态函数优先级标准语义SQL自定义语义SQL聚合子查询Hive多实现配置化加速策略动态能力定义驱动生产标准指标定义“点灯”维表关联年至今月至今One-Service指标市场用户维度中心定义驱动生产两个标准清晰的调用链路明确的调用边界充足的应急预案合理的熔断降级低代码-配置化前端能力编排基础能力发

4、布云端基础分析交叉分析杜邦分析转化分析关系分析进度分析地域分析洞察分析多端多场景分析可视化PC自营第三方低代码配置技术栈数据资产分析方法模板概括/明细框架（主板能力）标准化框架商业化框架微应用框架定制框架ReactSpringBootWebpacknodejsSVG Canvas D3.js Echarts移动邮件可视化编排分析思路Demo原型一键发布在线预览多端赋能业务网关数据推送数据下载查询引擎权限应用SLA时效性决策引擎分析逻辑编排数据编排分析联动数据驱动可视标准系统化生产配置化消费PaaS化看板/报告异动分析联动分析主题配置组件集市服务查询链路实践对比主题化服务 VS One-ServiceDataFunSummit#202303明天未来规划减少因为前端不足导致需要研发人员运维数据的情况减少水下能力减少用户选择项增加流程把控项用规范的流程化指引用户强化流程链路用户层系统层数据层报警分层优化查询规则减少查询链路服务轻量化动态熔断动态切流动态限流保护动态化DataFunSummit#202304致谢感谢观看