申请/专利权人：湖南快乐阳光互动娱乐传媒有限公司

申请日：2024-02-06

公开（公告）日：2024-04-30

公开（公告）号：CN117708354B

主分类号：G06F16/51

分类号：G06F16/51;G06F16/583;G06F16/58

优先权：

专利状态码：有效-授权

法律状态：2024.04.30#授权;2024.04.02#实质审查的生效;2024.03.15#公开

摘要：本申请提供了一种图像的索引方法、装置、电子设备及存储介质。其中，在图像的索引方法中，首先获取检索输入数据；其中，检索输入数据包括文本和或图像。然后生成所述检索输入数据的特征向量；其中，所述特征向量包括图文语义特征向量和第一图像指纹特征向量。接着基于图文语义特征向量，在预先构建的图像数据库中进行搜索，得到结果数据集。最后基于图像指纹特征向量对结果数据集进行相似性去重，得到最终的结果数据集，由此可知，利用本申请的方法，通过图文语义特征向量和图像指纹特征向量相结合的方式，准确地对图像进行检索，并对检索结果进行去重，避免检索结果出现图像纹理同质化的问题。

主权项：1.一种图像的索引方法，其特征在于，包括：获取检索输入数据；其中，所述检索输入数据包括文本和或图像；生成所述检索输入数据的特征向量；其中，若所述检索输入数据为文本，则所述特征向量为图文语义特征向量；若所述检索输入数据为图像，则所述特征向量为图文语义特征向量和第一图像指纹特征向量；若所述检索输入数据为文本和图像，则所述特征向量为图文语义特征向量和第一图像指纹特征向量，且所述图文语义特征向量包括基于所述文本生成的第一语义特征向量和基于所述图像生成的第二语义特征向量；所述图文语义特征向量为根据CLIP模型生成的；所述第一图像指纹特征向量为根据EfficientNet模型生成的，且所述第一图像指纹特征向量用于表征图像中的局部纹理特征或全局纹理特征；基于所述图文语义特征向量，在预先构建的图像数据库中进行搜索，得到结果数据集；其中，所述结果数据集包括与所述图文语义特征向量的语义相似度评分满足预设条件的图像数据，所述图像数据包括图像标识、语义相似度评分及第二图像指纹特征向量，所述第二图像指纹特征向量为图像标识对应的图像指纹特征向量；基于所述第二图像指纹特征向量对所述结果数据集进行相似性去重，得到最终的结果数据集，包括：确定是否生成了所述第一图像指纹特征向量；若确定出没有生成所述第一图像指纹特征向量，则将所述结果数据集中的各个第二图像指纹特征向量组成第一特征组；分别计算所述第一特征组中每两个图像指纹特征向量之间的余弦相似度；并根据所述余弦相似度对所述结果数据集中的各个第二图像指纹特征向量进行去重，得到最终的结果数据集；若确定出有生成所述第一图像指纹特征向量，则将所述第一图像指纹特征向量和所述结果数据集中的各个第二图像指纹特征向量组成第二特征组；分别计算所述第二特征组中每两个图像指纹特征向量之间的余弦相似度；并根据所述余弦相似度对所述结果数据集中的各个第二图像指纹特征向量进行去重，得到最终的结果数据集。

全文数据：

权利要求：

百度查询： 湖南快乐阳光互动娱乐传媒有限公司 图像的索引方法、装置、电子设备及存储介质

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD