申请/专利权人：广州优创电子有限公司

申请日：2022-04-11

公开（公告）日：2024-03-29

公开（公告）号：CN114782916B

主分类号：G06V20/58

分类号：G06V20/58;G06V20/59;G06V40/70;G06V10/80;G06V10/26;G06V10/46;G06V10/762

优先权：

专利状态码：有效-授权

法律状态：2024.03.29#授权;2022.08.09#实质审查的生效;2022.07.22#公开

摘要：本发明公开了一种后视镜搭载的基于多传感器融合的ADAS后车识别系统，包括：拍摄模块，设置在目标车辆的后视镜上，用于拍摄目标车辆后方的场景以获取视频数据流；解帧处理模块，用于对所述视频数据流进行解帧处理，获取若干帧视频图像；确定模块，用于对所述视频图像进行图像分割，确定每帧视频图像的车辆区域；显示模块，用于根据所述车辆区域的像素信息确定后方车辆的行车数据，并将所述行车数据显示出来。对车辆后方环境进行全面的感知，及时获取后方车辆的行车数据，发现后方车辆的驾驶状态，便于根据后方车辆的驾驶状态采取相应的应对措施，消除安全隐患。

主权项：1.一种后视镜搭载的基于多传感器融合的ADAS后车识别系统，其特征在于，包括：拍摄模块，设置在目标车辆的后视镜上，用于拍摄目标车辆后方的场景以获取视频数据流；解帧处理模块，用于对所述视频数据流进行解帧处理，获取若干帧视频图像；确定模块，用于对所述视频图像进行图像分割，确定每帧视频图像的车辆区域；显示模块，用于根据所述车辆区域的像素信息确定后方车辆的行车数据，并将所述行车数据显示出来；所述行车数据包括远光灯和近光灯状态、车速、转向、刹车状态、历史行驶轨迹；还包括：驾驶行为确定模块，用于：在所述车辆区域对应的局部图像中确定出驾驶图像；将所述驾驶图像输入预先训练好的人体识别模型中，确定头部关键点及肢体关键点；根据所述头部关键点确定第一头部图像；根据所述肢体关键点确定第一肢体图像；获取后方车辆上驾驶员的红外图像；对所述红外图像基于预设的人体不同部位的红外信息不同的规则，将所述红外图像分割为第二头部图像及第二肢体图像；将所述第一头部图像与所述第二头部图像进行匹配，在匹配成功后，将所述第一头部图像与所述第二头部图像进行像素加权以实现图像融合处理，得到第一融合图像；对所述第一融合图像进行归一化处理，并确定估计面部；将所述估计面部与所述第一融合图像上的真实面部进行重叠，并确定重叠信息；计算所述估计面部上的像素点的SIFT特征，并根据SIFT特征进行像素点的聚类，得到若干个聚类集合；根据所述重叠信息及所述若干个聚类集合确定所述估计面部与所述真实面部的对应关系，根据所述对应关系确定人脸特征；将所述第一肢体图像与所述第二肢体图像进行匹配，在匹配成功后，将所述第一肢体图像与所述第二肢体图像进行像素加权以实现图像融合处理，得到第二融合图像；将所述第二融合图像输入肢体特征提取模型，确定肢体特征；基于若干个肢体特征构建肢体的运动轨迹；根据所述人脸特征及所述肢体的运动轨迹，确定驾驶行为；报警模块，用于将所述驾驶行为与预设异常驾驶行为数据库中的异常驾驶行为进行匹配，在确定匹配成功时，发出报警提示。

全文数据：

权利要求：

百度查询： 广州优创电子有限公司 后视镜搭载的基于多传感器融合的ADAS后车识别系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD