AI智能总结
通过对话调优反馈消息正面和负面的评价样本,帮助模型训练及优化,提高智能体对话质量和可控性,使其逐渐趋于智能化和人性化。 反馈调优的预期是建立端到端的可感知效果,理想态:客户只要反馈(B端),对话就应该优化(C端)。实际建设目标:从商家反馈表达到模型应用,中间涉及到非常复杂的问题,拆分反馈分类应用到不同的策略模型中,最后得以调优。 1个例子弄懂【对话调优】模型调优逻辑 *针对该账号的真实网民咨询对话反馈中,分类进行应用 回答错误分类文案待优化分类其他优化建议 判断商家反馈分类 用户:咨询海景阁智能体:项目在售户型有55平-110平的一居到三居 商家评估智能体发言错误类型——回答错误,产品/项目信息错误 后续用户再次咨询海景阁,智能体优先使用文案信息解答 新建项目问答信息:question":"海景阁在售户型""answer":"海景阁在售户型有79平-193平" 商家评估智能体发言错误类型——文案待优化,回答信息太绝对,增加“套路” 后续用户就业创业相关场景,智能体优先使用商家优化文案回复 用户:就业创业智能体:可以的,咱们有长期的创业班 可以的,咱们有长期班和短期班,学完可以推荐就业,想创业的话,也有创业帮扶。 如何进行对话调优?1.回答错误-存在明显错误 Case对比示例 产品原理 优化逻辑:立足于配置项的调优>>修改直接同步至对应字段生效时段:实时生效 ❌错误反馈:点向下大拇指后,内容原封不动再点提交,不改 �正确反馈:按问题说错内容选择所属类型,并填写正确的业务、优势、地址内容 1、业务说错的,勾选“回答错误-经营业务”; 示例模版:①我们是xx公司+②经营业务是xx+③目标群体是xx+ 2、优势说错的,勾选“回答错误-服务优势”; 示例模版:我们支持免费上门服务,免费1 0项检测 3、地址说错的,勾选“回答错误-地址信息” 如何进行对话调优?1.回答错误-存在明显错误 Case对比示例 产品原理 优化逻辑:立足于对话语料的配置项调优>>修改直接同步至对应字段生效时段:小时级生效 �正确反馈: 示例模版:①触发回复内容+②回复话术 网民咨询:过敏原检查多少前? 问题描述:过敏原检查价格?回复内容:我院过敏原检查价格是230元 如何进行对话调优?2、文案待优化-调整客服话术文案 Case对比示例 产品原理 ❌错误反馈:填写的是问题解释,而不是建议话术 调优场景:智能体话术不当反馈方式:话术调优后的完整文案(需客服视角话术)优化逻辑:数据清洗->模型归类&数据溯源->策略优化->生效生效时段:较长周期生效 �正确反馈:直接填写回复话术 智能体发言:推荐您一款入门级二胡就可以的优化话术:琴友在我们家拿二胡,我们会免费送二胡教学视频和二胡纸质教材,还可以免费指导使用。 如何进行对话调优?3、其他优化建议-给智能体的建议 Case对比示例 产品原理 ❌错误反馈:问题描述的是网民发言内容 调优场景:智能体发言时机不当,或存在明显逻辑问题反馈方式:给出实际的建议内容(无需客服视角话术)优化逻辑:数据清洗->模型训练->策略优化->生效生效时段:较长周期 �正确反馈: 示例模版:文字描述建议内容 网民咨询:面部去皱项目 智能体发言:您之前了解过吗? 优化建议:这个不需要问顾客是否了解,不如问顾客是否医生面诊过 如何进行对话调优?4、推荐类反馈-针对产品卡等调优 Case对比示例 产品原理 ❌错误反馈:内容不该推——>无需推荐内容推荐有问题——>推荐内容错误 调优场景:智能体推荐内容错误反馈方式:无需推荐,当前场景下不该推,并给出理由;推荐内容错误,可给出应该正确表达的内容优化逻辑:数据清洗->模型训练->策略优化->生效生效时段:较长周期 �正确反馈:(无需客户视角) 示例模版:文字描述问题原因 无需推荐:不知道顾客具体咨询内容,不应该推荐项目推荐内容错误:除非网民搜索咨询医院家具,否则不应该推荐医生办公室家具。