申请/专利权人：董黎明

申请日：2020-09-30

公开（公告）日：2024-03-12

公开（公告）号：CN114333461B

主分类号：G09B7/02

分类号：G09B7/02;G06F18/22;G06F40/205

优先权：

专利状态码：有效-授权

法律状态：2024.03.12#授权;2022.04.29#实质审查的生效;2022.04.12#公开

摘要：本发明要求保护主观题自动评分方法及系统。该方法包括：获取待评分答案集和标准答案；基于待评分答案集和标准答案，构成参考评分主观题答案集和自动评分答案集；其中，参考评分答案集包括：从待评分答案集中随机选出的n份主观题答案以及标准答案；自动评分答案集包括待评分答案集中去除n份主观题答案之后所剩余的主观题答案；获取得分集合，得分集合包括n份主观题答案经人工评分后得到的分值，以及，标准答案对应的分值；对于自动评分答案集中的任一份主观题答案，计算其与参考评分答案集中各主观题答案的相似度；对相似度进行降序排序，得到排序结果；使用排序结果和得分集合，对上述任一主观题答案进行自动评分，得到自动评分分值。

主权项：1.一种主观题自动评分方法，其特征在于，包括：获取待评分答案集和标准答案；所述待评分答案集包括至少一份待评分的主观题答案；基于所述待评分答案集和所述标准答案，构成参考评分主观题答案集和自动评分答案集；其中，所述参考评分主观题答案集包括：从所述待评分答案集中随机选出的n份主观题答案以及所述标准答案；n为正整数；所述自动评分答案集包括所述待评分答案集中去除所述n份主观题答案之后所剩余的主观题答案；获取得分集合，所述得分集合包括所述n份主观题答案经人工评分后得到的分值，以及，所述标准答案对应的分值；对于所述自动评分答案集中的任一份主观题答案，计算所述任一份主观题答案与参考评分答案集中各主观题答案的相似度；所述任一份主观题答案表示为主观题答案x；对相似度进行降序排序，得到排序结果；使用所述排序结果和所述得分集合，对所述主观题答案x进行自动评分，得到所述主观题答案x的自动评分分值；其中，所述使用所述排序结果和所述得分集合，对所述主观题答案x进行自动评分，得到所述主观题答案x的自动评分分值包括：将排序结果中前r个位置在所述得分集合中对应的分值作为自动评分模型的输入，由所述自动评分模型对所述主观题答案x进行自动评分，得到自动评分分值；r为小于等于n的正整数；其中，所述方法还包括：随机抽取所述自动评分答案集中的m个主观题答案；获取所述m个主观题答案经人工复核后的人工复核分值；m为正整数；分别计算所述m个主观题答案的自动评分分值与人工复核分值之间的分值差；其中，分值差大于预设阈值的主观题答案为负样本；使用所述负样本的人工复核分值更新所述前r个位置所对应的权重；所述负样本所对应的排序结果为目标排序结果；所述负样本对应的人工复核分值表示为f；所述使用所述负样本的人工复核分值更新所述前r个位置所对应的权重包括：执行至少一轮权重更新操作，直至满足更新停止条件；每一轮权重更新操作至少包括：在目标分值集合中确定第一目标分值和第二目标分值；所述目标分值集合包括：所述目标排序结果的前r个位置在所述得分集合中所对应的分值，所述目标分值集合中的各分值初始时被标记为有效；所述第一目标分值为与所述f差值最小且被标记为有效的分值，所述第二目标分值为与所述f差值最大且被标记为有效的分值；对所述第一目标分值和所述第二目标分值所对应的位置的权重分别进行更新；将所述第一目标分值和所述第二目标分值标记为无效；使用更新后的权重重新计算所述负样本的自动评分分值；重新计算得到的自动评分分值表示为f’；判断f与f’是否满足所述更新停止条件，若是，停止；若否，判断所述目标分值集合标记为有效的分值的数量是否不小于2；若否，返回执行在目标分值集合中确定第一目标分值和第二目标分值的步骤；若是，将所述目标分值集合中的全部分值标记为有效，返回执行在目标分值集合中确定第一目标分值和第二目标分值的步骤。

全文数据：

权利要求：

百度查询： 董黎明 主观题自动评分方法及系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD