申请/专利权人：上海交通大学医学院附属瑞金医院

申请日：2023-11-06

公开（公告）日：2024-03-26

公开（公告）号：CN117766160A

主分类号：G16H80/00

分类号：G16H80/00;G06F16/332;G06F16/33;G06F16/338;G06F16/34

优先权：

专利状态码：在审-实质审查的生效

法律状态：2024.04.12#实质审查的生效;2024.03.26#公开

摘要：本发明公开基于预训练语言模型的医学问答文本质量评估系统及方法，包括医学知识文本及嵌入向量特征存储数据库，待评估文本输入模块，医学知识匹配模块，基于提示方法的文本质量评估模块，基于指标的文本准确性评估模块，基于提示方法的文本准确性评估模块，评估结果整合模块。本发明构建了医学知识文本及嵌入向量特征存储数据库，同时使用指标和提示方法评估机器生成回答的正确性，使用提示方法结合评测文本作为预训练语言模型的输入，可以实现多角度、多层次评估机器生成的文本回答质量评估服了传统评估方法只能在给定标准回答的前提下评估词汇和文本级别准确性的问题。

主权项：1.基于预训练语言模型的医学问答文本质量评估系统，其特征在于，包括以下模块：医学知识文本及嵌入向量特征存储数据库，用于保存医学知识文本及使用预训练语言模型生成的文本特征向量；待评估文本输入模块，用于输入待评估的医学问题及机器生成的文本回答，输出多维度的正确性相关的评价结果；医学知识匹配模块，用于使用待评估文本输入模块的文本特征在数据库中进行检索，得到与输入文本特征最接近的医学知识文本及其向量；基于提示方法的文本质量评估模块，用于将待评估文本回答结合提示模板评估输入到预训练的语言模型中，评估待测文本在用户友好角度的生成质量；基于指标的文本准确性评估模块，用于评估待评估文本回答与医学知识文本及嵌入向量特征存储数据库中正确的医学知识的匹配程度；基于提示方法的文本准确性评估模块，使用提示方法结合语言模型，将待评估文本输入模块得到的待评估的医学问题及机器生成的文本回答，以及医学知识文本及嵌入向量特征存储数据库所检索得到的正确医学知识文本与预定义的提示模板进行组合，输入到预训练语言模型中，评估机器生成的文本回答是否包含事实性错误以及是否存在潜在的危险因素；评估结果整合模块，用于将基于指标的文本准确性评估模块、基于提示方法的文本准确性评估模块和基于提示方法的文本质量评估模块输出的评估结果按照种类和格式进行整合，作为系统输出。

全文数据：

权利要求：

百度查询： 上海交通大学医学院附属瑞金医院 基于预训练语言模型的医学问答文本质量评估系统及方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD