申请/专利权人：南京烽火星空通信发展有限公司

申请日：2020-06-24

公开（公告）日：2024-03-19

公开（公告）号：CN111783608B

主分类号：G06V40/16

分类号：G06V40/16;G06V20/40;G06V10/26;G06V10/74;G06V10/764;G06V10/82;G06N3/0464;G06N3/09

优先权：

专利状态码：有效-授权

法律状态：2024.03.19#授权;2020.11.03#实质审查的生效;2020.10.16#公开

摘要：本发明公开了一种换脸视频检测方法，并提取出若干连续的单帧人脸图像，将截取每一帧人脸图像按照帧序号对应编码，形成一组具有编码的连续的人脸图片；通过人脸检测工具对每一人脸图片进行计算，获得对应的人脸痕迹图；计算出人脸痕迹图的区域面积，并比对单帧图像的区域面积，计算出轮廓比；每一张编码的人脸图片获取一个独立的轮廓比值，多张连续的人脸图片所产生的轮廓比值形成一串离散数据。本发明相比于现存的换脸检测技术，准确率更高，训练更加简单，结果更加具有可解释性。不再受限于标注训练数据量的限制，可适用于多种换脸工具伪造的视频。

主权项：1.一种换脸视频检测方法，其特征在于：S1：将包含人脸视频数据解码，并提取出若干连续的单帧人脸图像，将截取每一帧人脸图像按照帧序号对应编码，形成一组具有编码的连续的人脸图片；S2：通过人脸检测工具对每一人脸图片进行计算，获得对应的人脸痕迹图；S3：计算出人脸痕迹图的区域面积，并比对单帧图像的区域面积，计算出轮廓比；每一张编码的人脸图片获取一个独立的轮廓比值，多张连续的人脸图片所产生的轮廓比值形成一串离散数据；通过通用的opencv或者ffmpeg工具包，将包含人脸视频数据解码为一组连续的单帧人脸图像；通过python中开源的Dlib工具库，截取单帧人脸图像的人脸区域，不同帧图像中人脸区域的尺寸相同或者不同；使用RetinaFace人脸检测器检测单帧人脸图像中的人脸，用于确定单帧人脸图像中的人脸位置和大小，并采集每一帧人脸图像中关键点检测；对采集的关键点数据进行处理，具体步骤包括：1准备一组人脸数据，人脸数据需带有至少68个以上关键点标注信息；2随机选取准备好人脸数据中的任一张人脸A，并计算其余人脸与该人脸的相似度，这里采用两者关键点间的欧氏距离作为相似度评价指标，并按照相似度大小升序排序，取前100张最相似的人脸信息，缓存该排序信息，从前100张最相似人脸中随机选取1张人脸，设为B；3根据A的关键点位置，计算A的脸部轮廓凸包，将凸包内像素值设为1，凸包外的像素值设置为0，得到初始人脸掩膜;对初始人脸掩膜进行高斯模糊，将掩膜数据由int型转变为float32型，并软化掩膜;高斯核尺寸从随机选取，软化后得到最终的人脸掩膜M；4根据公式构造伪造人脸IM；5根据公式，得到最终的换脸痕迹S；6循环2）~5）生成一组训练数据，N为batchsize，损失函数由痕迹检测和分类两部分组成;其中痕迹检测损失函数为BCE损失，分类损失为交叉熵损失;为了加强对痕迹检测的监督，设置痕迹检测损失与分类损失的计算比例为100:1。

全文数据：

权利要求：

百度查询： 南京烽火星空通信发展有限公司 一种换脸视频检测方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD