申请/专利权人：北京市商汤科技开发有限公司

申请日：2019-03-18

公开（公告）日：2024-03-22

公开（公告）号：CN111723596B

主分类号：G06V20/59

分类号：G06V20/59;G06V40/16;G06V40/18;G06V10/80;G06V10/82

优先权：

专利状态码：有效-授权

法律状态：2024.03.22#授权;2020.10.27#实质审查的生效;2020.09.29#公开

摘要：本说明书实施例提供一种注视区域检测及神经网络的训练方法、装置和设备，其中，注视区域检测用神经网络的训练方法包括：至少将作为训练样本的人脸图像输入神经网络，其中，所述人脸图像包括有所述人脸图像中的人脸所对应的注视区域类别标注信息，标注的注视区域类别属于预先对指定空间区域划分得到的多类定义注视区域之一；经所述神经网络对输入的所述人脸图像进行特征提取，并根据提取的特征确定所述人脸图像的注视区域类别预测信息；确定获取的注视区域类别预测信息与相应图像的注视区域类别标注信息之间的差异；基于所述差异调整所述神经网络的网络参数。

主权项：1.一种注视区域检测用神经网络的训练方法，其特征在于，所述方法包括：至少将作为训练样本的人脸图像输入神经网络，其中，所述人脸图像包括有所述人脸图像中的人脸所对应的注视区域类别标注信息，标注的注视区域类别属于预先对指定空间区域划分得到的多类定义注视区域之一；经所述神经网络对输入的所述人脸图像进行特征提取，并根据提取的特征确定所述人脸图像的注视区域类别预测信息；确定获取的注视区域类别预测信息与相应图像的注视区域类别标注信息之间的差异；基于所述差异调整所述神经网络的网络参数；所述至少将作为训练样本的人脸图像输入神经网络之前，所述方法还包括：裁剪所述人脸图像中的至少一眼睛区域，得到至少一眼睛图像；所述至少将作为训练样本的人脸图像输入神经网络，包括：将所述人脸图像和所述人脸图像的所述至少一眼睛图像同时输入所述神经网络；所述将所述人脸图像和所述人脸图像的所述至少一眼睛图像同时输入所述神经网络，包括：将所述人脸图像和所述至少一眼睛图像对应输入所述神经网络包括的不同的特征提取分支，其中，输入到所述神经网络中的人脸图像和眼睛图像的尺寸不同；所述经所述神经网络对输入的所述人脸图像进行特征提取，并根据提取的特征确定所述人脸图像的注视区域类别预测信息，包括：经各所述特征提取分支分别提取输入各特征提取分支的人脸图像或眼睛图像的特征；融合各特征提取分支提取的人脸图像的特征和眼睛图像的特征，得到融合特征；根据所述融合特征确定所述人脸图像的注视区域类别预测信息。

全文数据：

权利要求：

百度查询： 北京市商汤科技开发有限公司 注视区域检测及神经网络的训练方法、装置和设备

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD