申请/专利权人:上海商汤善萃医疗科技有限公司
申请日:2023-11-30
公开(公告)日:2024-04-16
公开(公告)号:CN117892821A
主分类号:G06N5/04
分类号:G06N5/04;G06N3/045;G06N3/08;G06F16/332
优先权:
专利状态码:在审-实质审查的生效
法律状态:2024.05.03#实质审查的生效;2024.04.16#公开
摘要:本申请公开了一种问题回答模型的评测方法及相关装置、设备、平台和介质,其中,问题回答模型的评测方法包括:获取用于模拟用户与问题回答模型进行交互的交互模拟模型,并获取评测人员在首轮交互时模拟用户而输入的问题;获取问题回答模型响应于问题而输出的回答,并获取交互模拟模型响应于回答而输出新一轮的问题,以使问题回答模型响应于新一轮的问题与交互模拟模型开始新一轮的交互,直至交互结束;基于回答检测模型对问答数据进行检测,得到问题回答模型的评测结果;其中,问答数据包括各轮问答。上述方案,能够提升问题回答模型的评测效率。
主权项:1.一种问题回答模型的评测方法,其特征在于,包括:获取用于模拟用户与所述问题回答模型进行交互的交互模拟模型,并获取评测人员在首轮交互时模拟用户输入的问题;获取所述问题回答模型响应于所述问题而输出的回答,并获取所述交互模拟模型响应于所述回答而输出新一轮的问题,以使所述问题回答模型响应于所述新一轮的问题与所述交互模拟模型开始新一轮的交互,直至交互结束;基于回答检测模型对问答数据进行检测,得到所述问题回答模型的评测结果;其中,所述问答数据包括各轮问答。
全文数据:
权利要求:
百度查询: 上海商汤善萃医疗科技有限公司 问题回答模型的评测方法及相关装置、设备、平台和介质
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。