申请/专利权人：杭州觅睿科技股份有限公司

申请日：2024-02-21

公开（公告）日：2024-03-22

公开（公告）号：CN117746078A

主分类号：G06V10/75

分类号：G06V10/75;G06V10/82;G06F16/583

优先权：

专利状态码：在审-实质审查的生效

法律状态：2024.04.09#实质审查的生效;2024.03.22#公开

摘要：本申请提供了一种基于用户自定义类别的物体检测方法及系统，属于图文数据处理技术领域，包括：用户输入一段自然语言描述和一张相关图像，利用基于短语边界点建模技术的检测目标辅助刻画生成技术获得检测目标辅助输入；调用基于多模态重构对准网络的检测目标刻画生成模型，获得检测目标的多个文本刻画；基于图像自适应目标刻画匹配度估算技术生成目标反向刻画以进一步满足检测目标自定义需求；基于自定义物体检测使用过程中的反馈数据对图文多模态模型进行优化。支持用户自定义的物体检测技术，结合了多模态重构对准网络的目标刻画生成能力和图文多模态模型的图像识别能力，极大方便用户对图像识别技术的使用，方案具有较强的普及能力。

主权项：1.一种基于用户自定义类别的物体检测方法，其特征在于，包括：获取待检测用户的输入数据，基于短语边界点建模技术的检测目标辅助刻画生成技术对输入数据进行处理，得到检测目标的辅助输入数据，其中，输入数据包括文本数据和图像数据，检测目标为待检测用户的输入数据的物体检测结果；基于多模态重构对准网络的检测目标刻画生成技术对输入数据和辅助输入数据进行处理，得到检测目标的文本刻画，文本刻画的数量大于等于两个；基于图像自适应的目标刻画匹配度估算技术对文本刻画进行筛选，将不符合用户自定义需求的文本刻画选出，得到反向刻画；将反向刻画和筛选后的文本刻画汇总后输入图文多模态模型中运算，得到待检测用户的检测目标；存储待检测用户得到检测目标后的反馈数据，基于反馈数据对图文多模态模型进行调优。

全文数据：

权利要求：

百度查询： 杭州觅睿科技股份有限公司 一种基于用户自定义类别的物体检测方法及系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD