申请/专利权人:北京明略昭辉科技有限公司
申请日:2020-10-20
公开(公告)日:2021-01-15
公开(公告)号:CN112232070A
主分类号:G06F40/279(20200101)
分类号:G06F40/279(20200101);G06F40/284(20200101);G06F40/151(20200101)
优先权:
专利状态码:在审-实质审查的生效
法律状态:2021.02.02#实质审查的生效;2021.01.15#公开
摘要:本发明提出一种自然语言处理模型构建方法、系统、电子设备及存储介质,其方法技术方案包括采用联合抽取的方法来进行信息抽取,同时挖掘不同颗粒度的信息,包括词性信息对应的词向量、字向量等;此外,本发明对原始训练数据进行负采样,得到一批负样本,来解决模型的低资源问题以及增加模型的识别难度。本发明提高了非结构化文本信息抽取的实施效果,提高了模型的鲁棒性。
主权项:1.一种自然语言处理模型构建方法,其特征在于,包括:S101.在文本样本中标注原始训练数据;S102.对所述原始训练数据负采样得到负例数据;S103.将所述原始训练数据与所述负例数据合并为最终训练数据;S104.使用自然语言处理工具获取所述文本样本中的词性信息,根据所述最终训练数据训练第一词向量;S105.将所述文本样本中的字词转化为字向量和第二词向量,并将所述字向量和所述第二词向量组合;S106.根据所述第一词向量、字向量和第二词向量获取所述文本样本的实体分类损失函数;S107.根据所述第一词向量、字向量、第二词向量和所述文本样本的关系信息获取所述文本样本的关系分类损失函数;S108.将所述实体分类损失函数和所述关系分类损失函数相加得到联合损失函数,对所述联合损失函数进行反向传播梯度运算获得自然语言处理模型。
全文数据:
权利要求:
百度查询: 北京明略昭辉科技有限公司 自然语言处理模型构建方法、系统、电子设备及存储介质
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。