数据标注功能指南
数据标注功能
数据标注功能允许管理员对大模型回答进行质量评估和优化系统响应能力。
使用方法
1
查看历史对话
管理员通过查看历史聊天记录,可以评估模型回答的质量
2
标记正确答案
当发现模型给出的回答是准确、全面且有价值的,管理员可以将其标记为”正确答案”
3
自动复用
系统会保存这些标记的答案,并在下次遇到相似问题时自动复用
知识库配置
需要开启知识库的标注数据使用功能:
工作原理
- 当用户提出新问题时,系统会计算问题的向量表示
- 系统会将新问题与已标记答案的问题进行向量相似度比较
- 如果发现完全相同的问题,或向量匹配度超过 0.9(被判定为同一问题),系统会直接返回标记过的答案
- 这种方式避免了重复调用大模型,提高了响应速度,并确保了回答质量
优势
- 提高回答一致性:确保对相同问题提供统一的回答
- 减少模型调用:降低系统资源消耗和响应延迟
- 质量保证:所有自动回复的答案都经过了管理员的人工确认
- 持续优化:管理员可以不断添加高质量标记,使系统的回答能力逐步提升