申请/专利权人：海信视像科技股份有限公司

申请日：2020-12-30

公开（公告）日：2021-04-09

公开（公告）号：CN112633211A

主分类号：G06K9/00(20060101)

分类号：G06K9/00(20060101)

优先权：

专利状态码：失效-发明专利申请公布后的驳回

法律状态：2024.02.23#发明专利申请公布后的驳回;2021.04.27#实质审查的生效;2021.04.09#公开

摘要：本申请公开了一种服务设备及人机交互方法。用于解决采用多模态的信号来提高人机交互的适用性和稳定性的问题。本申请实施例中，采用人脸检测的方法从视频数据中提取多帧图像中的目标对象；并采用人脸特征点检测算法获取该目标对象的唇部图像；采用滑动窗口以及对齐处理等操作对唇部图像进行处理，得到待处理唇部图像序列；对待处理唇部图像序列进行初步粗分类，筛选掉虽有耦合性但不支持的唇语；对筛选过后唇部图像序列进行唇语识别，得到唇语识别结果；根据唇语识别的结果，执行相应的操作。

主权项：1.一种人机交互方法，其特征在于，所述方法包括：从视频数据的多帧图像中提取目标对象的唇部图像，并将提取的唇部图像按时序存储到唇部图像集合中；根据预设的滑动窗口从所述唇部图像集合中截取多帧唇部图像，得到待处理唇部图像序列；基于所述待处理唇部图像序列进行唇语识别，得到唇语识别结果；若所述唇语识别结果中包括控制指令，则控制人机交互设备执行所述控制指令对应的操作。

全文数据：

权利要求：

百度查询： 海信视像科技股份有限公司 一种服务设备及人机交互方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD