申请/专利权人:富士胶片商业创新有限公司
申请日:2019-10-10
公开(公告)日:2024-04-05
公开(公告)号:CN111222737B
主分类号:G06Q10/0637
分类号:G06Q10/0637;G06N20/00;G06V40/20
优先权:["20181127 US 16/201,868"]
专利状态码:有效-授权
法律状态:2024.04.05#授权;2021.11.12#实质审查的生效;2021.06.08#著录事项变更;2020.06.02#公开
摘要:用于实时技能评估的方法及系统以及计算机可读介质。这里描述的示例实现方式涉及诸如用于医院的洗手依从性或者工厂中组装产品之类的技能评估的系统及方法。示例实现方式涉及身体部位例如手跟踪、骨骼跟踪以及深度神经网络,以检测并识别子任务以及评估各子任务的技能。此外,检查子任务的顺序的正确性。除了监测单个用户,示例实现方式还能够用于分析并提高具有多个子任务的工作流设计。
主权项:1.一种方法,该方法包括以下步骤:使用计算机视觉技术分析从相机系统接收的多个图像帧,以在所述多个图像帧中检测用户的与要完成的任务相关联的身体部位;基于被配置为将要完成的所述任务的多个子任务中的每一个与顺序图像帧相关联的机器学习模型的应用,将从所述相机系统接收的所述多个图像帧中的顺序图像帧分组到所述多个子任务中,所述分组包括以下步骤:计算所述多个图像帧上的密集光流,计算所述密集光流的步骤包括为所述多个图像帧中的每一个产生x分量图像和y分量图像;基于使用所述机器学习模型,通过对所述顺序图像帧中的每一个分配子任务标签来将所述多个子任务中的每一个与所述顺序图像帧相关联,以使用所述机器学习模型对所述顺序图像帧的x分量和y分量中的每一个进行分类;基于对所述顺序图像帧的所述子任务标签进行分组来分割出所述多个子任务中的每一个;以及将所分割出的多个子任务中的顺序子任务分组为要完成的所述任务;以及基于对所述多个子任务的完成和所述子任务的顺序正确性的检测,来提供对所述任务的完成的评估,所述评估包括以下步骤:根据所述多个子任务中的顺序子任务的分组,识别所述子任务的顺序正确性;通过对加标签的顺序图像帧中的对应顺序图像帧应用计算机视觉算法,来识别所述多个子任务中的每一个的完成;以及基于所识别的顺序正确性、所识别的所述多个子任务中的每一个的完成以及所述多个子任务中的每一个的技能得分,计算要完成的所述任务的技能得分。
全文数据:
权利要求:
百度查询: 富士胶片商业创新有限公司 用于实时技能评估的方法及系统以及计算机可读介质
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。