申请/专利权人：暗物智能科技(广州)有限公司

申请日：2023-11-16

公开（公告）日：2024-03-19

公开（公告）号：CN117238039B

主分类号：G06F30/27

分类号：G06F30/27;G06V40/20

优先权：

专利状态码：有效-授权

法律状态：2024.03.19#授权;2024.01.02#实质审查的生效;2023.12.15#公开

摘要：本发明公开了一种基于顶视视角的多任务人体行为分析方法及系统，涉及计算机视觉技术领域。方法包括采集目标顶视场景图片，并对目标顶视场景图片中的人体特征数据进行标注；将标注后的人体特征数据划分为训练集及验证集；构建多任务人体行为分析模型，多任务人体行为分析模型包括主干网络，以及与主干网络连接的多个预测头；将训练集输入多任务人体行为分析模型进行模型训练，并利用训练好的多任务人体行为分析模型对人体左、右肩点位置坐标进行预测，并基于人体左、右肩点位置坐标计算人体朝向，同时输出人体框、头顶点位置坐标和人体表征向量用于行人跟踪。通过本发明能够提高行人的跟踪召回率和跟踪速度。

主权项：1.一种基于顶视视角的多任务人体行为分析方法，其特征在于，包括以下步骤：1数据采集与标注：采集目标顶视场景图片，并对所述目标顶视场景图片中的人体特征数据进行标注，所述人体特征数据包括人体id、人体框、头顶点位置坐标、左肩点位置坐标以及右肩点位置坐标；将标注后的人体特征数据划分为训练集及验证集；2模型构建：构建多任务人体行为分析模型，所述多任务人体行为分析模型包括主干网络，以及与主干网络连接的多个预测头，所述预测头包括若干点预测头、若干框预测头以及一个外观表征预测头；3模型训练：将训练集输入多任务人体行为分析模型进行模型训练，训练过程中给正anchor分配id，并将外观表征预测头输出的外观表征向量输入softmax函数；4模型预测：利用训练好的多任务人体行为分析模型对待测目标顶视场景图片中的人体左、右肩点位置坐标进行预测，并基于人体左、右肩点位置坐标计算人体朝向，同时输出人体框、头顶点位置坐标和人体表征向量用于行人跟踪；还包括对目标顶视场景图片中的多个目标进行检测，利用每个目标的左、右肩点预测人体朝向；区别不同的目标，需要给目标场景里的每个人分配id：具体包括：利用每帧人体框检测结果、头顶点结果、朝向检测结果以及每个人体框的外观表征向量结果，对比前后帧图像检测结果的相似度，所述相似度包括框交并比、朝向角度相似度、人特征向量相似度，判断后一帧每个人体框和上一帧中的相同人体框是相同人，并赋予相同id。

全文数据：

权利要求：

百度查询： 暗物智能科技(广州)有限公司 基于顶视视角的多任务人体行为分析方法及系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD