2019年基于APM的智能运维体系在京东物流的落地和实践.pdf

《2019年基于APM的智能运维体系在京东物流的落地和实践.pdf》由会员分享，可在线阅读，更多相关《2019年基于APM的智能运维体系在京东物流的落地和实践.pdf（38页珍藏版）》请在三个皮匠报告上搜索。

1、基于APM的智能运维体系在京东物流的落地和实践京东物流 架构师目录业界智能运维发展现状及趋势智能运维体系建设方法论大规模实时监控平台的实践方案智能故障定位与处理实践 APM 在京东物流的落地实践 智能运维(AIOps)落地规划业界智能运维发展趋势新的问题运维人数不变，管理机器数翻倍1234正在消失的运维运维从业者减少，运维专家匮乏运维平台日趋复杂，缺乏统一规划公司内部监控/运维系统繁多，形成数据孤岛网络拓扑日益复杂，资源云化，虚拟资源频繁弹性伸缩。不可靠的CMDB过去1:n 现在1:10越来越复杂的应用拓扑消息服务器发消息应用D应用E收消息收消息收消息数据库分布式缓存JDBCJDBC读缓存分布

2、式文件系统写缓存存取应用A开放平台API 请求无线客户端请求前端网页请求应用B应用C服务调用服务调用应用F应用G服务调用服务调用应用H服务调用服务调用服务调用应用A数据库JDBC前端网页请求系统问题定位难快速发展的APMAPM(应用性能管理)市场规模逐年递增01020304050607020142015201620172018APM市场规模(亿美元)目前，全球APM市场规模大约在60亿美元左右，预计在五年内达到90亿美元APM成为ITOM成长最快的领域APM能够对企业的关键业务应用进行监测、诊断分析、优化，最终能够提高应用的可靠性和质量，保证良好的用户体验，降低IT成本运维角色转变背锅侠救火员

3、被动响应主动求变需求提炼产品化开发产品化落地产品意识推广落地业务数据分析过程改进技术运营事件处理业务分析业务预测业务增值架构标准化架构实施架构优化架构运维运维价值凸显 新运维时代来临目录业界智能运维发展现状及趋势分析智能运维体系建设方法论大规模实时监控平台的实践方案智能故障定位与处理实践 APM 在京东物流的落地实践智能运维(AIOps)落地规划智能运维体系建设方法论统一规划、避免重复建设标准化是前提产品化设计、产品化开发服务驱动运维中台业务增值过程改进智能运维体系建设方法论闭环生命周期管理流程管理审计归档目录业界智能运维发展现状及趋势分析智能运维体系建设方法论大规模实时监控平台的实践方案智能

4、故障定位与处理实践 APM 在京东物流的落地实践智能运维(AIOps)落地规划大规模实时监控平台V1.0大规模监控平台架构大规模实时监控平台V1.0多级部门、应用多维度统计日报、周报、同比、环比统计低资源使用率TOP统计低负载应用榜单低资源使用率应用优化建议多维度使用率分析助力企业降本增效使用率报表大规模实时监控平台V2.0整合多端数据，解决数据孤岛问题性能分析、告警分析更加准确更全面评估应用健康状况大规模实时监控平台V2.0整合各种应用维度的指标分析，提供更全面的应用数据分析和故障诊断系统指标调用链指标日志分析数据库指标JVM指标应用拓扑自动探测应用健康报告大规模实时监控平台V2.0日志处理

5、架构大规模实时监控平台V3.0产品规划大规模实时监控平台V3.0故障预测、容量预测、性能预测预测分类：预测算法：重点关注：LSTM、多元线性回归、决策树、随机森林、神经网络、朴素贝叶斯分类、最小二乘法、支持向量机 算法匹配度评分日历适配、基于节假日的机器学习算法Kpi自动分类并匹配预测算法基于业务关联关系的预测算法预测大规模实时监控平台V3.0红绿灯大屏可视化目录业界智能运维发展现状及趋势分析智能运维体系建设方法论大规模实时监控平台的实践方案智能故障定位与处理实践 APM 在京东物流的落地实践智能运维(AIOps)落地规划智能故障处理传统故障处理被动故障处理：1.事后处理：出先故障后开始处理，

6、易造成业务中断；2.人工处理：基于工作流的故障上报和处理，层层通知手工定位故障原因，故障修复时间长；3.无计划性：多为突发情况，进行临时处理，难免有疏漏之处；4.报警爆炸：随着业务增长，报警越来越多，运维人员不堪其扰主动故障处理：1.事前感知：通过故障预测算法，预测故障类型及发生时间，并提前通知项目负责人；2.自动处理：决策引擎根据预设的事件处理策略，自动执行处理指令以及基于机器学习的自动故障处理；3.定时巡检：平台化的定时巡检机制，给出应用健康报告，问题早发现早解决；4.报警收敛：对告警做告警筛选、过滤、合并操作，大大减少报警数量；故障快照出现告警自动抓取现场快照信息快照信息持久化保存根据自