关于我们

微信对话开放平台数据统计

发布时间:2021-01-18

 

个人零费用代理店+,日收入3000+,可兼职做

统计

统计是平台为开发者跟踪并观测自己已发布技能服务能力提供的数据支持,通过数据反馈,帮助开发者进一步管理、优化和创新技能。根据对技能不同关注点、不同时间范围的需要,开发者可以查看或下载基础数据概况和模型标注的数据统计情况。

概况
概况数据的衡量维度主要包括用户数、昨日平均轮次、对话数、命中率四项; 1.会话数据:从用户向公众号/小程序发出请求到退出对话框计算为一次会话,展示昨日日会话数具体数据,并可按时间维度展示日会话数波动情况; 2.用户数据:统计一段时间内,使用技能的粉丝数量,展示昨日日用户数具体数据,并可按时间维度展示日用户数波动情况; 3.昨日平均轮次:昨日平均轮次=昨日对话数/昨日用户数; 4.命中率:统计一段时间内,技能命中整体情况,展示未命中话术与未命中话术占比; 

其他数据
其他数据包含准确率、召回率、F1、AUC 四项数据
1.准确率:准确率(P) = 标注的正确信息条数 / 标注的所有信息条数;
2.召回率:召回率(R)= 标注的正确信息条数 / 样本中所有信息条数;
3.F1: 准确率和召回率的调和平均数,F1 = (2 _ P _ R) / (P + R);
4.AUC(Area UnderCurve):代表不同类别的区分度,AUC 值越大代表标注正确的概率越大;

命中技能排名
1.统计该机器人下所有技能名称,技能命中次数,技能总数(命中次数指用户与该机器人对话时命中该技能的次数)按命中次数排序;


 2.点击“技能名称”右侧图标,可查看技能详情,按时间维度统计该技能命中次数波动情况,展示该技能下所有意图,意图命中次数,意图总数;

未命中话术排名
1.未命中话术:当机器人回复为默认回答时,统计为未命中话术;
2.统计未命中话术中的具体 query 及该 query 未命中次数,统计未命中话术总数;
 3.点击未命中话术右侧图标,展示未命中详情;

模型标注

模型标注主要包括准确率、召回率、F1、AUC 四项数据展示和“用户问法和命中回答”手动标注部分,通过手动标注用户真实 query 与命中 question 是否一致,优化机器人模型,提高机器人回答正确率;
1.“用户问法和命中回答”手动标注部分:
用户问法:用户真实 query;
命中的问题:模型中命中的标准问题;(点击右方链接可直接跳转该问题编辑页面)
命中回答:命中标准问题的机器人回答;
正确:用户问法与命中回答表达意思一致;
错误:用户问法与命中回答表达意思不一致;
清空标注:清空之前标注情况;\

/template/Home/AllNew/PC/Static