申请/专利权人：大连三通科技发展有限公司

申请日：2023-12-27

公开（公告）日：2024-04-09

公开（公告）号：CN117472189B

主分类号：G06F3/01

分类号：G06F3/01;G06V40/20;G06V20/40;G06F3/04886;G06F3/04883

优先权：

专利状态码：有效-授权

法律状态：2024.04.09#授权;2024.02.20#实质审查的生效;2024.01.30#公开

摘要：本发明具有实物感的打字或触控的实现方法，应用于XR扩展现实可穿戴设备、头戴式显示装置的系统，在手掌的关节连线上标定预置点，用户透过眼镜可看到手掌上预置点所绑定的功能区域，并设定两个触发判断点WL和WR；获取有视差的N个图像视频流，对相同帧的图像追踪并判断所有图像中触发指尖T的位置是否落入任一功能区域对应的两触发判断点之间，并取三个目标点位置值中的X轴值,分别计算WL与T的差值和T与WR的差值的比值，仅当N个图像的所有比值皆相同时，则表示触发指尖触碰到功能区域，输出或触发功能区域对应的内容。本发明仅通过视觉计算就能精准确认是否真实触碰，且触碰的是手掌或者物体表面，在打字或触控时具有实物感。

主权项：1.具有实物感的打字或触控的实现方法，应用于XR扩展现实可穿戴设备、头戴式显示装置的系统，该系统通过人手关节检测模型输出人手在视频画面中若干个关节点的带有时序的位置信息，手掌包括掌心和手指，其特征在于，通过触发指尖触碰功能区域实现打字和触控，该功能区域包括可供触发的字符数字按钮、功能键或快捷键，该功能区域与手掌的关节连线上标定的预置点绑定，包括如下步骤：步骤1、在手掌的关节连线上标定预置点，用户透过眼镜可看到手掌上预置点所绑定的功能区域，设功能区域的宽度为W,将预置点作为功能区域的中心点，在平行于X轴向左W2和向右W2处，取左触发判断点WL和右触发判断点WR；基于关节点推算出对应的预置点及其绑定的功能区域的左触发判断点WL和右触发判断点WR的位置信息；步骤2、默认大拇指尖为触发指尖，若大拇指不进入手掌内区域，且由其他任一手指欲触碰手掌或其他功能区域，则判断该手指的指尖为触发指尖，触发指尖位置定义为T；步骤3、系统获取有视差距离的N个图像视频流，其中N为整数，，针对相同帧的N个图像，追踪并判断所有图像中触发指尖T的位置是否落入任一功能区域左右两边界对应的左触发判断点WL和右触发判断点WR之间，若是落入，计算每个图像内的三个目标点的位置值，目标点包括左触发判断点WL、触发指尖T和右触发判断点WR，取三个目标点的位置值中的X轴值（WRX,TX,WLX）,分别计算WL与T的差值和T与WR的差值的比值TX-WRX:WLX-TX，仅当N个图像的所有比值皆相同时，则表示触发指尖触碰到功能区域，输出或触发功能区域对应的内容。

全文数据：

权利要求：

百度查询： 大连三通科技发展有限公司 具有实物感的打字或触控的实现方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD