申请/专利权人：江苏音律未来乐器科技有限公司

申请日：2023-12-20

公开（公告）日：2024-03-15

公开（公告）号：CN117711055A

主分类号：G06V40/18

分类号：G06V40/18;G06V40/16;G06V10/24;G06V10/62;G06V40/19;G06V10/143

优先权：

专利状态码：在审-实质审查的生效

法律状态：2024.04.02#实质审查的生效;2024.03.15#公开

摘要：本发明公开了一种乐器演奏时视线追踪方法和装置，包括支撑架，以及设置在支撑架上方的视线追踪装置和支撑架；所述视线追踪装置包括：双目摄像头用于采集坐在古筝前的演奏者人像图像；人体定位单元可用于接收由双目摄像头传输的人像信息，并使用包含基于深度神经网络的人体骨架识别算法定位图像中人体位置，并进一步定位图像中人脸位置；人脸识别单元用于对人脸进行精确识别和定位；三维重建单元可用于通过双目摄像头解析出的人体信息，重构出人体在实际空间中的位置。本发明使用摄像头获取演奏者面部信息，并通过人工智能算法获取人眼信息，实现人眼视线追踪，以此矫正投影在古筝上的位置，以实现最佳的视觉效果。

主权项：1.一种乐器演奏时视线追踪装置，其特征在于，包括支撑架3，以及设置在支撑架3上方的视线追踪装置2和支撑架3；所述视线追踪装置2包括：双目摄像头201用于采集坐在古筝前的演奏者人像图像；人体定位单元202可用于接收由双目摄像头传输的人像信息，并使用包含基于深度神经网络的人体骨架识别算法定位图像中人体位置，并进一步定位图像中人脸位置；人脸识别单元203用于对人脸进行精确识别和定位；三维重建单元204可用于通过双目摄像头解析出的人体信息，重构出人体在实际空间中的位置；视线解析单元205用于收集人脸精准定位，以及根据人眼及瞳孔位置，计算演奏者视线方向，同时根据三维空间信息，计算演奏者视线在古筝上的落点；通信单元206可用于将计算得到的演奏者视线信息发送至投影装置；红外摄像头207可用以辅助双目摄像头在光照不佳或光照条件较为辅助的场景下进行人眼及瞳孔的识别与定位。

全文数据：

权利要求：

百度查询： 江苏音律未来乐器科技有限公司 一种乐器演奏时视线追踪方法和装置

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD