申请/专利权人：北京百度网讯科技有限公司

申请日：2020-05-29

公开（公告）日：2024-04-02

公开（公告）号：CN111639599B

主分类号：G06V20/40

分类号：G06V20/40;G06V10/26;G06V10/46;G06V10/74;G06V10/82;G06F16/783;G06F16/9535

优先权：

专利状态码：有效-授权

法律状态：2024.04.02#授权;2020.10.02#实质审查的生效;2020.09.08#公开

摘要：本申请实施例公开了物体图像挖掘方法、装置、设备以及存储介质，涉及人工智能、深度学习、图像处理技术领域。该方法的一具体实施方式包括：获取视频与视频标题，其中，视频标题中存在实体；基于实体搜索对应的实体图像集合；从视频中分割出候选物体图像；分别对候选物体图像和实体图像集合进行特征提取，生成候选物体图像特征和实体图像特征集合；计算候选物体图像特征与实体图像特征集合的相似度；基于相似度对候选物体图像进行过滤，得到实体对应的物体图像。该实施方式能够快速地从视频中挖掘出大量实体对应的物体图像，且挖掘出的实体对应的物体图像可作为标注数据用于视频帧中物体检测和识别的训练，降低了视频标注成本。

主权项：1.一种物体图像挖掘方法，包括：获取视频与视频标题，其中，所述视频标题中存在实体；基于所述实体搜索对应的实体图像集合；从所述视频中分割出候选物体图像；分别对所述候选物体图像和所述实体图像集合进行特征提取，生成候选物体图像特征和所述实体图像特征集合；计算所述候选物体图像特征与所述实体图像特征集合的相似度；基于所述相似度对所述候选物体图像进行过滤，得到所述实体对应的物体图像；其中，所述计算所述候选物体图像特征与所述实体图像特征集合的相似度，包括：计算所述候选物体图像特征与所述实体图像特征集合中的实体图像特征的余弦距离，得到余弦距离集合；从所述余弦距离集合中选取最大的前预设数目个余弦距离，以及将所选取的余弦距离的平均值作为所述候选物体图像特征与所述实体图像特征集合的相似度，其中，所选取的余弦距离的数目基于相似度的计算准确度和计算效率确定；其中，所述从所述视频中分割出候选物体图像，包括：利用视频镜头分割算法对所述视频进行分割，得到多个镜头视频片段；利用视频图像分割算法对所述多个镜头视频片段进行分割，得到候选物体分割结果；基于所述候选物体分割结果，确定候选物体区域；在所述视频中分割所述候选物体区域，得到所述候选物体图像；其中，所述利用视频图像分割算法对所述多个镜头视频片段进行分割，得到候选物体分割结果，包括：对所述多个镜头视频片段中的视频帧进行视频物体分割，得到初始物体分割结果；利用密集条件随机场模型对所述初始物体分割结果进行精细化处理，得到精细化物体分割结果；对所述精细化物体分割结果进行图像形态学运算，得到所述候选物体分割结果，其中，所述图像形态学运算是先腐蚀后膨胀的运算。

全文数据：

权利要求：

百度查询： 北京百度网讯科技有限公司 物体图像挖掘方法、装置、设备以及存储介质

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD