买专利,只认龙图腾
首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

【发明公布】基于多模态融合模型的体育赛事解说视频剪辑方法及系统_东南大学_202410056166.9 

申请/专利权人:东南大学

申请日:2024-01-15

公开(公告)日:2024-04-09

公开(公告)号:CN117857841A

主分类号:H04N21/234

分类号:H04N21/234;H04N21/2343;H04N21/44;H04N21/4402

优先权:

专利状态码:在审-实质审查的生效

法律状态:2024.04.26#实质审查的生效;2024.04.09#公开

摘要:本发明公开了基于多模态融合模型的体育赛事解说视频剪辑方法及系统,涉及视频剪辑技术领域,包括:接收体育赛事解说视频及剪辑切片,将体育赛事解说视频及剪辑切片整合生成体育赛事解说视频剪辑数据集;将体育赛事解说视频剪辑数据集输入至预先建立的多模态融合模型内,输出得到推理结果,利用得到的推理结果与体育赛事解说视频剪辑数据集内的数据进行计算,得交叉熵损失函数;设定函数阈值,若交叉熵损失函数小于阈值,则更新并保存多模态融合模型参数,得到训练后的多模态融合模型参数,若大于等于阈值,则重新计算,至小于阈值为止;将体育赛事解说视频输入至训练后的多模态融合模型参数内,得到优化推理结果,对体育赛事解说视频进行剪辑。

主权项:1.基于多模态融合模型的体育赛事解说视频剪辑方法,其特征在于,方法包括以下步骤:接收体育赛事解说视频及剪辑切片,将体育赛事解说视频及剪辑切片进行整合生成体育赛事解说视频剪辑数据集;将体育赛事解说视频剪辑数据集输入至预先建立的多模态融合模型内,输出得到推理结果,利用得到的推理结果与体育赛事解说视频剪辑数据集内的数据进行计算,得出交叉熵损失函数;设定函数阈值,若交叉熵损失函数小于阈值,则更新并保存多模态融合模型参数,得到训练后的多模态融合模型参数,若交叉熵损失函数大于等于阈值,则重新计算交叉熵损失函数,至交叉熵损失函数小于阈值为止;将体育赛事解说视频输入至训练后的多模态融合模型参数内,得到优化推理结果,根据优化推理结果对体育赛事解说视频进行剪辑。

全文数据:

权利要求:

百度查询: 东南大学 基于多模态融合模型的体育赛事解说视频剪辑方法及系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。