申请/专利权人：北京航空航天大学

申请日：2024-01-09

公开（公告）日：2024-04-12

公开（公告）号：CN117876928A

主分类号：G06V20/40

分类号：G06V20/40;G06V10/44;G06V10/764;G06V10/82;G06N3/0455;G06N3/0464;G06N3/048;G06N3/084

优先权：

专利状态码：在审-实质审查的生效

法律状态：2024.04.30#实质审查的生效;2024.04.12#公开

摘要：本公开的实施例公开了基于全局信息的全景视频注视点转移探测与增强方法。包括：获取全景视频注视点转移数据集；设计FishNet网络；对于每个全景视频注视点转移数据：输入FishNet网络中的球面到平面网格投影功能模块，得到无失真版本ERP全景图；将无失真版本ERP全景图输入ERP本地编码器，得到全景图局部特征；将全景图局部特征输入全景感知解码器，得到全景图全局特征；将全景图全局特征输入选择性特征筛选子模块，得到高判别域组；将高判别域组输入注视点转移感知特征增强子模块，得到全景视频注视点转移增强特征。该实施方式可以无失真地提取全景视频的全局特征，对注视点转移与正常注视点进行有效区分，为复杂场景下的注视点转移提供可靠和创新的解决方案。

主权项：1.一种基于全局信息的全景视频注视点转移探测与增强方法，包括：获取无失真的全景视频注视点转移数据集；设计FishNet全景视频注视点转移探测与增强网络，其中，FishNet网络包括全景感知模块和注视点转移探测模块，所述全景感知模块包括全景感知外挂子模块和ERP本地编码器，所述全景感知外挂子模块是由球面到平面网格投影功能模块和全景感知解码器组成的，所述注视点转移探测模块包括选择性特征筛选子模块和注视点转移感知特征增强子模块；对于所述全景视频注视点转移数据集中的每个全景视频注视点转移数据，执行以下步骤：将所述全景视频注视点转移数据输入所述FishNet网络中的、全景感知外挂子模块包括的球面到平面网格投影功能模块以进行图像预处理，得到无失真版本ERP全景图；将所述无失真版本ERP全景图输入所述ERP本地编码器以进行特征提取处理，得到全景图局部特征；将所述全景图局部特征输入所述全景感知外挂子模块包括的全景感知解码器以复原全局信息，得到全景图全局特征；将所述全景图全局特征输入所述注视点转移探测模块包括的选择性特征筛选子模块以进行移位注视点识别处理，得到高判别域组，其中，每个高判别域为包含移位注视点的全局图中的区域；将所述高判别域组输入所述注视点转移探测模块包括的注视点转移感知特征增强子模块以进行注视点转移感知特征增强处理，得到全景视频注视点转移增强特征。

全文数据：

权利要求：

百度查询： 北京航空航天大学 基于全局信息的全景视频注视点转移探测与增强方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD