买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网恭喜神州融信云科技股份有限公司申请的专利基于多模态AI识别的自动化测试脚本动态生成方法及系统获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN120011247B 。

龙图腾网通过国家知识产权局官网在2025-06-17发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202510499050.7，技术领域涉及：G06F11/3668；该发明授权基于多模态AI识别的自动化测试脚本动态生成方法及系统是由许萌设计研发完成，并于2025-04-21向国家知识产权局提交的专利申请。

本基于多模态AI识别的自动化测试脚本动态生成方法及系统在说明书摘要公布了：本申请涉及计算机技术领域，提供一种基于多模态AI识别的自动化测试脚本动态生成方法及系统，用以在降低人工维护成本的同时显著提升测试用例的覆盖维度和执行鲁棒性。其中，该方法包括：获取目标测试界面数据，并提取测试界面数据中的动态交互特征，调用完成训练的目标检测网络对测试界面数据进行元素定位处理，生成界面元素坐标集合，基于界面元素坐标集合，调用文字识别网络对界面元素分布信息进行多模态特征解析，生成包含文字语义特征与图标分类特征的特征融合结果；将特征融合结果输入脚本生成模型进行动态路径规划处理，输出自动化测试脚本元素，自动化测试脚本元素包含基于元素操作序列生成的逻辑控制指令和坐标自修正参数。

本发明授权基于多模态AI识别的自动化测试脚本动态生成方法及系统在权利要求书中公布了：1.一种基于多模态AI识别的自动化测试脚本动态生成方法，其特征在于，包括： 获取目标测试界面数据，并提取所述测试界面数据中的动态交互特征，所述测试界面数据包含界面元素分布信息和视觉层级关系； 调用完成训练的目标检测网络对所述测试界面数据进行元素定位处理，生成界面元素坐标集合，所述界面元素坐标集合包含元素类型标识与位置编码的映射关系：对所述测试界面数据进行图像分块处理，生成多个图像块区域和对应的边界框初始参数；提取每个图像块区域的卷积特征图，并对所述卷积特征图进行通道注意力加权处理，生成加权后的空间特征向量；将所述空间特征向量与预设的锚框尺寸进行交并比计算，筛选出满足置信度阈值的候选区域；对所述候选区域进行非极大值抑制处理，生成包含所述元素类型标识的界面元素坐标集合，每个界面元素坐标包含相对于所述测试界面数据进的归一化位置编码； 基于所述界面元素坐标集合，调用文字识别网络对所述界面元素分布信息进行多模态特征解析，生成包含文字语义特征与图标分类特征的特征融合结果：根据所述界面元素坐标集合中的归一化位置编码，对所述测试界面数据进行区域截取处理，生成多个元素图像片段；对每个元素图像片段进行灰度化和二值化处理，生成优化后的文字识别输入数据；调用文字识别网络中的双向长短期记忆子网对所述文字识别输入数据进行序列特征提取，生成文字语义特征向量；并行调用图标分类模型对所述元素图像片段进行卷积核特征匹配，生成图标分类概率分布；将所述文字语义特征向量与所述图标分类概率分布进行张量拼接，生成多模态特征融合结果； 将所述特征融合结果输入脚本生成模型进行动态路径规划处理，输出自动化测试脚本元素，所述自动化测试脚本元素包含基于元素操作序列生成的逻辑控制指令和坐标自修正参数。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人神州融信云科技股份有限公司，其通讯地址为：100193 北京市海淀区马连洼北路138号院1号楼6层619；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。