一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

一种实体识别方法、装置和计算机设备与流程

2022-04-16 22:04:43 来源:中国专利 TAG:

技术特征:
1.一种实体识别方法,其特征在于,包括:确定第一媒体数据,并获取所述第一媒体数据对应的待识别文本;调用训练后的实体识别模型对所述待识别文本进行目标识别处理,确定所述待识别文本的实体;其中,所述训练后的实体识别模型用于对所述待识别文本进行纠错处理,得到所述待识别文本对应的纠正文本,并对所述纠正文本进行实体识别,得到所述纠正文本的参考实体;将所述纠正文本的参考实体确定为所述待识别文本的实体;所述待识别文本的实体用于进行与第一媒体数据关联的推荐。2.如权利要求1所述的方法,其特征在于,所述第一媒体数据的数量为多个,每个第一媒体数据对应一个待识别文本;所述方法还包括:获取参考媒体数据,并基于所述参考媒体数据从多个第一媒体数据中确定目标媒体数据;所述目标媒体数据对应的待识别文本的实体与所述参考媒体数据对应的文本的实体匹配;输出目标媒体数据。3.如权利要求1所述的方法,其特征在于,所述方法还包括:基于所述待识别文本的实体进行实体匹配,确定第二媒体数据,所述第二媒体数据对应的文本的实体与所述待识别文本的实体匹配;输出第二媒体数据。4.如权利要求1所述的方法,其特征在于,所述训练后的实体识别模型包括训练后的纠错模型和训练后的实体预测模型;所述调用训练后的实体识别模型对所述待识别文本进行目标识别处理,确定所述待识别文本的实体,包括:调用所述训练后的纠错模型对所述待识别文本进行纠错处理,得到所述待识别文本对应的纠正文本;调用所述训练后的实体预测模型对所述纠正文本进行实体识别,得到所述纠正文本的参考实体;将所述纠正文本的参考实体确定为所述待识别文本的实体。5.如权利要求1-4任一项所述的方法,其特征在于,所述训练后的实体识别模型包括训练后的实体预测端到端模型,所述方法还包括:调用所述训练后的实体预测端到端模型对所述待识别文本进行特征提取,得到所述待识别文本对应的文本向量;对所述纠正文本进行特征提取,得到所述纠正文本对应的文本向量;对所述纠正文本的参考实体进行特征提取,得到所述纠正文本的参考实体对应的实体向量;基于所述待识别文本对应的文本向量、所述纠正文本对应的文本向量和所述参考实体对应的实体向量对所述待识别文本进行实体识别,得到所述待识别文本的候选实体;将所述待识别文本的候选实体确定为所述待识别文本的实体。6.如权利要求5所述的方法,其特征在于,所述方法还包括:将所述待识别文本的候选实体和所述纠正文本的参考实体进行实体融合,得到所述待识别文本的实体。7.如权利要求5所述的方法,其特征在于,所述基于所述待识别文本对应的文本向量、
所述纠正文本对应的文本向量和所述参考实体对应的实体向量对所述待识别文本进行实体识别,得到所述待识别文本的候选实体,包括:调用所述训练后的实体预测端到端模型中的第一注意力模块对所述纠正文本对应的文本向量和所述待识别文本对应的文本向量进行注意分析,得到所述待识别文本的预测实体的实体向量;调用所述训练后的实体预测端到端模型中的第二注意力模块对所述待识别文本的预测实体的实体向量和所述参考实体对应的实体向量进行注意分析,得到所述待识别文本的候选实体。8.如权利要求7所述的方法,其特征在于,所述调用所述训练后的实体预测端到端模型中的第一注意力模块对所述纠正文本对应的文本向量和所述待识别文本对应的文本向量进行注意分析,得到所述待识别文本的预测实体的实体向量,包括:对所述纠正文本对应的文本向量和所述待识别文本对应的文本向量进行差异分析,得到所述纠正文本对应的纠错位置,所述纠错位置用于指示所述纠正文本中与所述待识别文本所包含的对应字符不同的目标字符在所述纠正文本中所处的位置;调用所述训练后的实体预测端到端模型中的第一注意力模块对所述纠错位置和所述纠正文本进行注意力分析,得到所述待识别文本的预测实体的实体向量。9.如权利要求7所述的方法,其特征在于,所述调用所述训练后的实体预测端到端模型中的第二注意力模块对所述待识别文本的预测实体的实体向量和所述参考实体对应的实体向量进行注意分析,得到所述待识别文本的候选实体,包括:基于所述参考实体对应的实体向量,确定所述参考实体在所述纠正文本中的目标位置;在所述待识别文本中确定所述目标位置对应的预测实体的实体向量;调用所述训练后的实体预测端到端模型中的第二注意力模块对所述目标位置对应的预测实体的实体向量进行注意分析,得到所述待识别文本的候选实体。10.如权利要求1所述的方法,其特征在于,所述方法还包括:获取第一训练文本以及所述第一训练文本对应的实体标签;调用实体识别模型对所述第一训练文本进行纠错处理,得到所述第一训练文本对应的纠正文本,并对所述第一训练文本对应的纠正文本进行实体识别,得到所述第一训练文本的预测实体;基于所述第一训练文本的预测实体和对应的实体标签对所述实体识别模型进行训练,得到训练后的实体识别模型。11.如权利要求4所述的方法,其特征在于,所述方法还包括:获取第二训练文本以及所述第二训练文本对应的纠正文本标签;调用纠错模型对所述第二训练文本进行纠错处理,得到所述第二训练文本对应的预测纠正文本;基于所述第二训练文本的预测纠正文本和对应的纠正文本标签对所述纠错模型进行训练,得到训练后的纠错模型。12.如权利要求4所述的方法,其特征在于,所述方法还包括:获取第三训练文本以及所述第三训练文本对应的实体标签;
调用训练后的纠错模型对所述第三训练文本进行纠错处理,得到所述第三训练文本对应的纠正文本;对所述第三训练文本对应的纠正文本进行实体识别,得到所述第三训练文本的预测实体;基于所述第三训练文本的预测实体和对应的实体标签对所述实体预测模型进行训练,得到训练后的实体预测模型。13.如权利要求5所述的方法,其特征在于,所述方法还包括:获取第四训练文本、所述第四训练文本对应的训练纠正文本、所述训练纠正文本的训练实体和所述第四训练文本对应的实体标签;采用实体预测端到端模型对所述第四训练文本进行特征提取,得到所述第四训练文本对应的文本向量;对所述训练纠正文本进行特征提取,得到所述训练纠正文本对应的文本向量;对所述训练纠正文本的训练实体进行特征提取,得到所述训练纠正文本的训练实体对应的实体向量;基于所述第四训练文本对应的文本向量、所述训练纠正文本对应的文本向量以及所述训练纠正文本的训练实体对应的实体向量对所述第四训练文本进行实体识别,得到所述第四训练文本的预测实体;基于所述第四训练文本的预测实体和对应的实体标签对所述实体预测端到端模型进行训练,得到训练后的实体预测端到端模型。14.一种实体识别装置,其特征在于,包括:获取单元,用于确定第一媒体数据,并获取所述第一媒体数据对应的待识别文本;处理单元,用于调用训练后的实体识别模型对所述待识别文本进行目标识别处理,确定所述待识别文本的实体;其中,所述训练后的实体识别模型用于对所述待识别文本进行纠错处理,得到纠正文本,并对所述纠正文本进行实体识别,得到所述纠正文本的参考实体;将所述纠正文本的参考实体确定为所述待识别文本的实体;所述待识别文本的实体用于进行与第一媒体数据关联的推荐。15.一种计算机设备,其特征在于,处理器,适用于实现一条或多条计算机程序;计算机存储介质,所述计算机存储介质存储有一条或多条计算机程序,所述一条或多条计算机程序适于由所述处理器加载并执行如权利要求1-13任一项所述的实体识别方法。

技术总结
本发明实施例提供了一种实体识别方法、装置和计算机设备,其中方法包括:确定第一媒体数据,并获取第一媒体数据对应的待识别文本,调用训练后的实体识别模型对所述待识别文本进行目标识别处理,确定所述待识别文本的实体;其中,所述训练后的实体识别模型用于对所述待识别文本进行纠错处理,得到纠正文本,并对所述纠正文本进行实体识别,得到所述纠正文本的参考实体;将所述纠正文本的参考实体确定为所述待识别文本的实体,可以提高实体识别的准确性。准确性。准确性。


技术研发人员:陈小帅
受保护的技术使用者:腾讯科技(深圳)有限公司
技术研发日:2021.12.30
技术公布日:2022/4/15
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献