申请/专利权人：云南大学

申请日：2023-09-12

公开（公告）日：2023-12-22

公开（公告）号：CN117271824A

主分类号：G06F16/583

分类号：G06F16/583;G06N3/048;G06V10/774;G06V10/82

优先权：

专利状态码：在审-实质审查的生效

法律状态：2024.04.30#实质审查的生效;2023.12.22#公开

摘要：本发明公开了一种带有风格特征的用户感知多模态动漫插画推荐系统，其特征在于，包括以下步骤：获取用户与插画的数据集对；利用插画图像特征编码器抽取语义特征的同时，抽取出绘画风格特征向量，并加入融合动漫领域知识的多角度文本语义特征；使用注意力机制对于多模态贡献度建模，识别用户对作品的不同模态之间的交互的影响；将融合后的多模态特征与用户特征进行特征交叉，得到用户‑画作表征；最后经过DNN与Sigmoid激活输出用户收藏插画对象的概率。训练带有风格特征与语义特征输出的图像多模态编码器与融合领域知识的文本模态编码器，并加入基于注意力机制与DCN模式的用户感知的多模态特征交叉模块，构建多模态动漫插画推荐模型，提升了插画推荐效果。

主权项：1.一种带有风格特征的用户感知多模态动漫插画推荐系统，其特征在于，包括以下步骤：用户与插画对象输入：获取用户与插画的数据集对，分为训练集和测试集；多模态特征抽取：利用插画图像特征编码器抽取语义特征的同时，抽取出绘画风格特征向量，并加入融合动漫领域知识的多角度文本语义特征；用户感知的多模态特征贡献度融合机制：使用注意力机制对于多模态贡献度建模，对于用户特征向量与插画的多模态特征进行注意力加权，识别用户对作品的不同模态之间的交互的影响；多模态特征交叉：将融合后的多模态特征与用户特征经过DCN模块进行特征交叉，得到特征交叉后的用户-画作表征；最后经过DNN与Sigmoid激活输出用户收藏插画对象的概率。

全文数据：

权利要求：

百度查询： 云南大学 一种带有风格特征的用户感知多模态动漫插画推荐系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD