====== 训练师平台(旗舰版功能) ====== 训练师平台主要面向经过专业培训的AI训练师。主要功能包括good case评测、bad case评测、diff评测、批量问答、实体管理、公共意图管理、任务式多轮对话管理等功能。 如图: {{:cs:训练师1.png?|}} ===== 评测工具 ===== 多租户管理平台支持添加、管理多个租户。适用于拥有多个租户的平台/企业,帮助整体把握多个平台的运作情况 **1.批量问答**:面向机器人训练师、数据标注人员,使用测试问题样本集测试机器人对问题的答复,是用来检测知识库创建后前使用状况如:覆盖率。 操作步骤: 训练师平台—>测评工具—>批量问答,进入批量问答页面。 1、先下载模版,在模版里把会话标识和问题列项填好 {{:cs:批量问答-下载模版.png|}} \\ {{:cs:样本模版填写1.png|}} 2、点击“新增样本集”,在弹窗中输入样本集名称,点击导入既定格式的.xlsx样本集文件,然后点击上传。【样本可以通过右上角下载模板后进行数据编辑】 {{:cs:训练师2.png|}} 3、上传样本后,点击【+】按钮,添加任务,输入任务名称和选择要测试的机器人,点击【保存】。 {{:cs:添加任务.png|}} {{:cs:选择测试机器人.png|}} 4、查看跑完数据的详细结果,点击【任务记录】-【导出结果】 {{:cs:批量问答-任务记录.png|}} {{:cs:导出结果.png|}} {{:cs:结果查看.png|}} **2.Good case:** 面向机器人训练师、数据标注人员,对指定机器人进行GoodCase评测,输出机器人的答案,并计算机器人答复准确率。 操作步骤:训练师平台—>测评工具—>Goodcase,进入Goodcase页面。 1) 点击“新增样本集”,在弹窗中输入样本集名称,点击导入既定格式的.xlsx样本集文件,然后点击上传。【样本可以通过右上角下载模板后进行数据编辑】 2) 上传样本后,就可以开始任务了,点击“+”号,输入任务名称和选择要测试的机器人。 3) 假如任务状态为失败,可以通过任务纪要来查询详情 **3.diff测评:**针对不同的机器人, 使用相同语料集,以覆盖率作为主要指标评测效果 操作步骤:训练师平台—>测评工具—>Goodcase,进入Goodcase页面。 1) 点击“新增样本集”,在弹窗中输入样本集名称,点击导入既定格式的.xlsx样本集文件,然后点击上传。【样本可以通过右上角下载模板后进行数据编辑】 2) 上传样本后,就可以开始任务了,点击“+”号,输入任务名称和选择要测试的机器人。 3) 假如任务状态为失败,可以通过任务纪要来查询详情 ===== 任务式多轮对话管理 ===== 环信机器人旗舰版提供任务对话管理功能,该模块实现基于图形化界面配置多轮对话,即无编程快速添加编辑多轮对话流程,方便日常运营对多轮对话的管理。 支持对当前机器人实例的所有任务进行管理,包括:创建、删除任务,以及配置任务流程。 ==== 创建任务多轮 ==== 1.点击任务对话搭建\\ 2.创建新任务\\ 3.输入“任务名”\\ 4.选择任务类型\\ 5.任务状态【上线测试之前可以设置为禁用状态,搭建好测试的时候再变更为“启用”状态】\\ {{:cs:多轮创建.png?|}}\\ ==== 配置任务流程 ==== 1.支持流程编辑、修改、删除\\ {{:cs:流程创建.jpeg|}} 2.拖动创建新节点\\ 3.节点与节点之间的连接线,点击编辑节点线条件,即多轮流程节点触发的条件\\ 4.点击齿轮进行节点内容编辑\\ {{:cs:流程创建1.png|}}\\ 5.节点内容编辑:\\ {{:cs:节点配置.png|}}\\ 节点名称:支持10字以内\\ 执行单元:执行条件、执行内容\\ 执行条件:可以引用意图、实体、正则表达式等\\ 执行内容包括:使用webhook、变量赋值、采集方案、回复内容、动态菜单\\ (1)webhook对接说明如图\\ {{:cs:webhook对接说明.png?400|}}\\ (2)变量赋值:支持7种如图:\\ {{:cs:变量赋值.png|}}\\ (3)引用创建好的采集方案如图\\ {{:cs:引用方案3.png?|}}\\ (4)配置触发该条件后机器人的回复,支持多种答案类型\\ 答案组:支持10个子答案\\ 文字:1000个字符\\ 菜单:需要先从菜单管理添加菜单,此处直接引用\\ 图片:支持直接上传,也可以引用素材库中图片\\ 转人工:支持转指定在线技能组\\ 图文消息:支持直接新增图文,也可以引用素材库中图文\\ {{:cs:回复内容.png|}}\\ (5)动态菜单:区别于回复类型中的菜单,此次可以定义变量菜单\\ 具体操作步骤可以参考:http://docs-ai.easemob.com/cs/user-robot-course ===== 管理工具 ===== ==== 实体管理 ==== 通过实体管理,使机器人对会话意图抽取实体信息,增强命名实体识别,帮助机器人识别会话意图,从而进行有效应答,提升应答的精准性。系统实体应用于平台所有租户机器人,训练师登录管理平台补充维护用户实体和启/停用系统实体,为机器人预置实体,以提供基础实体识别能力。 1.可以引用系统实体,选择自己需要的实体点击“启用“图标为蓝色,不启用为灰色。如图: {{:cs:实体1.png?|}} 2.也可以根据自己需求自定义实体库,可以单条添加实体,也可批量导入实体, 如图 {{:cs:实体2.png?|}} 点击创建实体:输入实体名称-实体描述-选择实体规则【正则表达式或者词典】,如图: {{:cs:实体3.png|}}{{:cs:实体4.png|}} 备注:选择正则表达式的时候一定要验证表达式。 训练师平台是旗舰版功能。请联系您的客户经理,或者拨打400-622-1776.以了解训练师平台的详细功能。 ===== 采集信息管理 ===== 在机器人的任务对话中可以通过配置采集方案,敏捷、高效地收集用户画像并将其推荐给运营人员。\\ ==== 创建采集方案 ==== 1.选择机器人\\ 2.创建方案\\ 3.编辑采集方案名称\\ 4.编辑方案描述\\ 5.添加采集变量,此处变量要与节点设置上的变量赋值保持一致。\\ 6.可以修改方案或者删除方案\\ 7.可查看采集数据信息\\ {{:cs:方案创建.png?|}}\\ {{:cs:方案采集1.png?|}}\\ {{:cs:采集方案2.png?|}}\\ ==== 引用采集方案 ==== 1.选择需要采集的任务多轮对话。\\ 2.选择需要采集的节点。\\ 3.采集方案打上✅。\\ 4.引用创建好的采集方案。\\ {{:cs:引用方案.png?|}}\\ {{:cs:引用方案2.png?|}}\\ {{:cs:引用方案3.png?|}} ==== 采集数据查询 ==== 点击“7”即可查看该方案下的数据采集情况\\ 点击筛选支持自定义时间选择、会话ID、用户ID查看具体采集数据情况。\\ {{:cs:采集方案2.png?|}}\\ {{:cs:数据查询1.png?|}}\\ {{:cs:用户信息.png?|}}\\