申请/专利权人：芋头科技(杭州)有限公司

申请日：2019-12-19

公开（公告）日：2024-03-29

公开（公告）号：CN111124117B

主分类号：G06F3/01

分类号：G06F3/01;G06V40/20;G06V40/10;G06T7/246;G06V10/82;G06N3/0464

优先权：

专利状态码：有效-授权

法律状态：2024.03.29#授权;2020.06.02#实质审查的生效;2020.05.08#公开

摘要：本发明涉及一种基于手绘草图的交互方法。该方法包括：通过深度相机，获取手的深度图像的帧序列，通过关节分析模块，识别所述深度图像中的手的一个或多个关节，通过手势类型判断模块，确定所述一个或多个关节代表的手势类型，根据不同的手势类型，运行对应的执行模块，完成手绘草图的绘制。通过本发明公开的一个或多个实施例，可以降低手势识别输入过程中的计算力需求、提升计算效力、提升输入复杂图像的用户体验。

主权项：1.一种基于手绘草图的交互方法，应用于增强现实的交互设备，包括，通过所述增强现实的交互设备上的深度相机，获取手的深度图像的帧序列，对于所述深度图像的帧序列中的每个深度图像，基于泛洪填充算法将深度图像按区域划分，然后选取深度的平均值最低的区域作为前景区域；通过关节分析模块，识别所述深度图像的帧序列对应的各个前景区域中的手的一个或多个关节，其中，所述关节分析模块包括：手部区分模块和手势回归模块，通过所述手部区分模块对手进行分类，通过三维输出的结果代表手的三种类别，即左手、右手、无手；通过所述手势回归模块对手的关键进行3D建模，手势回归模块设计为右手手势回归或左手手势回归，当手的类别与手势回归的类别不同时，将手沿着垂直轴进行翻转后进行处理；通过手势类型判断模块，确定所述一个或多个关节代表的手势类型，根据不同的手势类型，运行对应的执行模块，完成手绘草图的绘制，将所述手绘草图传输到远程服务器的神经网络进行分析，获取所述神经网络的分析结果，展示所述分析结果；其中所述执行模块包括，启动绘制模块、点位确认模块、结束绘制模块；当所述启动绘制模块运行时，追踪所述一个或多个关节的移动轨迹，当所述点位确认模块运行时，记录所述移动轨迹的当前位置，设为关键点，当所述结束绘制模块运行时，停止记录所述移动轨迹。

全文数据：

权利要求：

百度查询： 芋头科技(杭州)有限公司 基于手绘草图的增强现实交互方法和设备

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD