AI Agents提升On-call支持效率：探索与实践.pdf

1、 AI Agents提升On-call支持效率：探索与实践张尧 博士算法研究员 背景介绍相关工作调研方案介绍未来展望01背景介绍背景介绍第一章节eBay Sherlock.io 监控平台信号指标日志追踪事件能力多维分析告警规则异常检测追踪分析方案BCDGrootExemplarRemediationOn-call日常工作 endpoints/API/.是什么？我的PromQL/LogQL/.写的不对，可以帮我修改吗？我的指标/日志/事件/追踪/.数据怎么不见了？我设置的告警怎么不触发/反复触发/触发晚了/.？我的quota不够，可以帮我增加吗？02相关工作调研相关工作调研第二章节检索增强生成

2、RAGGao et al.,2024,Retrieval-Augmented Generation for Large Language Models:A Survey.工作流 WorkflowDify.https:/dify.ai/智能体 AI AgentsWeng.2023.LLM Powered Autonomous Agents.https:/lilianweng.github.io/posts/2023-06-23-agent/ReActYao et al.,2023,ReAct:Synergizing Reasoning and Acting in Language Models.

3、反思 ReflectionShinn et al.,2023,Reflexion:Language Agents with Verbal Reinforcement Learning.Zhao et al.,2023,ExpeL:LLM Agents Are Experiential Learners.ReflexionExpeL思维树 ToTYao et al.,2023,Tree of Thoughts:Deliberate Problem Solving with Large Language Models.树搜索 LLM Agents+MCTSZhou et al.,2024,Lang

4、uage Agent Tree Search Unifies Reasoning Acting and Planning in Language Models.Putta et al.,2024,Agent Q:Advanced Reasoning and Learning for Autonomous AI Agents.LATSAgent Q性价比？Kapoor et al.,2024,AI Agents That Matter.03方案介绍方案介绍第三章节Le PenseurGenerated by AI意图识别 Intent RecognitionHi，sherlock-oncall，

5、我的Raptor应用ABC怎么platform metrics没有了？https:/link_to_dashboard-Sherlock：eBay的监控平台-Raptor:eBay基于Java Spring/Springboot的技术栈-platform metrics:一种特殊类型的指标私有词汇识别+RAG+(workflow)用户的问题是关于基于检索到的历史数据，需要考虑以下 App:ABCIP:xxx.xxx.xxx.xxx解析URLTime Range:PromQL:路由 RoutingQ&AAgentTriageAgentQ&A/Escalate endpoints/API/.是什么

6、？我的PromQL/LogQL/.写的不对，可以帮我修改吗？我的指标/日志/事件/追踪/.数据怎么不见了？我设置的告警怎么不触发/反复触发/触发晚了/.？我的quota不够，可以帮我增加吗？可以zoom帮我看下这个问题吗？重路由 Re-routing1.用户无法清晰描述问题2.用户追问(QA-Triage)3.第一轮路由错了4.执行一些action后有了更多信息路由算法1.两阶段路由算法：召回+排序2.基于LLM的排序1.Hierarchical2.Dynamic few-shot3.COT4.Self-consi