1、演讲人:桑海龙58同城算法资深工程师 2023 个人介绍 桑海龙,58同城TEG-AI Lab算法资深工程师,智能客服算法负责人,2019年10月加入58同城,一直从事智能客服算法研发工作,本硕毕业于哈尔滨工业大学,2017年7月毕业后校招加入猎豹移动,从事对话算法工作。工作经历 19年10月至今 58同城 AI Lab 17年7月19年10月 猎豹移动 教育背景 15年9月17年7月 硕士 哈尔滨工业大学 计算机科学与技术 11年8月15年7月 本科 哈尔滨工业大学 软件工程AI Lab产品能力介绍58AILab公众号公众号58技术公众号技术公众号 业务场景介绍 招聘平台下的对话机器人 算法
2、实现与优化实践 总结与展望业务场景介绍58同城产业化平台简介 第一曲线流量 纯信息分发,收取广告费 第二曲线产业化 产业化就是把整个链条所有的信息流程全部在线化、数字化,并且能够无缝地将上下游协同起来。需要提供客户需要的所有服务,让客户在房产、汽车、招聘、本地服务等领域都能有更高的效率。58同城招聘场景58同城APP赶集直招APP招聘场景的BC连接与意向达成 招聘场景连接路径 微聊 电话 投递 面试 微信 高意向达成行为 连接过程中识别为有意向 连接时长 同意面试 中意向达成行为BC连接与高意向达成的阻碍点BC之间难以触达BC用户活跃周期不一致存在问题引入反向邀约场景留资机器人接待问询智能双呼
3、机器人算法筛选意向用户BC缺少强提醒连接B端消息回复不及时C主观求职意愿不明确C端简历不完善招聘平台下的对话机器人招聘平台下对话机器人应用场景 反向邀约场景 C2B微聊场景对话机器人促成连接达成 快问快答-留资机器人 自动回答C求职问题 帮B多轮问询招聘问题 智能双呼-双呼机器人 推进BC双方电话连接对话机器人简介-留资机器人 按照功能划分,主要包括如下几种 与以回答用户提问为主的QA问答机器人不同,留资机器人的主要任务是引导引导用户留下资料信息用户留下资料信息 留资机器人适用场景 招聘业务-收集用户简历信息,判断用户求职意向 本地服务-问题答疑、收集用户需求信息 解决问题 无人接待时线索浪费
4、 人工接待水平不一,随接待量变化 节省人力成本对话机器人简介-留资机器人留资机器人回答用户问题主动引导询问拟人化交互方式获取用户资料线索QABotTaskBot话术学习槽位识别QA问答机器人对话机器人简介-双呼机器人功能:机器人先外呼A,A接听后机器人再外呼B,B接听后AB直连沟通应用场景:任何通知提醒场景(如IM微聊消息提醒)均可应用机器人C端用户B端用户对话机器人效果评估 会话流畅度(衡量C端用户体验)流畅:本轮对话机器人回复衔接自然,感觉和人工回复相似 不流畅:回答错误/引导不当/重复发问/抢答/其他情况 整轮流畅:一个会话中所有轮都被标为流畅 截止5轮流畅:对5轮及以上会话,截取前5轮
5、都流畅 整轮会话流畅度=整轮流畅会话数/总体会话数 评价AI整体会话能力 截止5轮会话流畅度=5轮及以上流畅会话数/5轮及以上总会话数 评价AI深度会话能力 留资率 定义:IM有意向数/C主动会话数 衡量对话系统留资能力 促进促进BCBC双方高意向达成双方高意向达成 高意向达成转化率:T+1高意向数/C点击数 补充补充C C端用户端用户简历信息简历信息 简历更新率:修改简历数/创建会话数留资机器人效果双呼机器人效果机器人对话案例C端用户回复AI智能回复AI商机引导AI商机识别邀约推送用户求职意向识别留资机器人会话双呼机器人会话算法实现与优化实践留资机器人系统结构 任务型对话任务型对话系统系统Q
6、ABot-作用与实现正确回答能解决用户疑问错答会造成用户体验不佳未召回会错误指引TaskBot,影响体验 QABot在对话系统中有如下作用:QABot依赖知识库的整理构建:意图识别模型如:LSTM、BERT等QABot模型选择-轻量级预训练语言模型SPTM(Simple Pre-trained Model):开源项目地址:https:/ Dropout的随机性,可以近似把输入走过两次的路径网络当作两个略有不同的模型;在样本分布不均衡时,关注不同类别的稳定性,提高鲁棒性QABot-ChatGPT应用探索 GPT-3.5 有监有监督微调督微调SFTSFT RLHFRLHF:reinforcemen