申请/专利权人：微软技术许可有限责任公司

申请日：2018-11-08

公开（公告）日：2024-03-12

公开（公告）号：CN111159472B

主分类号：G06F16/735

分类号：G06F16/735;G06F16/783

优先权：

专利状态码：有效-授权

法律状态：2024.03.12#授权;2020.06.09#实质审查的生效;2020.05.15#公开

摘要：本文公开的多模态聊天技术，用于在聊天机器人与人类的交互中，采用多模态答复的方式对用户询问进行答复。通过采用多模态方式的答复，使得聊天机器人的表达方式和内容更加丰富。

主权项：1.一种计算设备，包括：硬件处理器；以及存储器，所述存储器存储于指令，所述指令在被执行时使所述硬件处理器执行动作，包括：从与用户的会话人工智能会话中，获取用户查询；对所述用户查询和多个多模态元组中的每个多模态元组中的每个单模态数据，执行包含相似度匹配计算的单模态数据融合处理，并且生成多个单模态融合数据，其中所述单模态融合数据中包含了所述用户查询与所述单模态数据之间的相似度的第一相似度信息；将所述多个多模态元组中的每个多模态元组对应的所述多个单模态融合数据进行多模态数据融合处理，并且生成多模态融合数据，其中所述多模态融合数据中包含了所述用户查询与所述多模态元组之间的相似度的相似度信息；对所述用户查询与所述多模态元组之间的所述相似度的所述相似度信息执行排序，并且根据针对所述相似度信息的所述排序的结果来确定用于来生成多模态答复的一个或者多个多模态元组；根据确定的一个或者多个多模态元组，生成所述多模态答复；使用确定的一个或者多个多模态元组，生成概要信息；以及使得所述多模态答复作为对于所述会话人工智能会话中的所述用户查询的答复的至少一部分来被输出在所述用户的显示设备上，所述输出包括对应于所述一个或者多个多模态元组的一个或者多个视频片段并且包括所述概要信息。

全文数据：

权利要求：

百度查询： 微软技术许可有限责任公司 多模态聊天技术

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD