申请/专利权人:西安理工大学
申请日:2023-11-30
公开(公告)日:2024-04-05
公开(公告)号:CN117829583A
主分类号:G06Q10/0635
分类号:G06Q10/0635;G06Q50/06;G06N5/04;G06N5/02;G06N20/00;G06V20/70;G06V10/40;G06F40/35
优先权:
专利状态码:在审-实质审查的生效
法律状态:2024.04.23#实质审查的生效;2024.04.05#公开
摘要:本发明公开了基于视觉问答的电力作业安全风险辅助纠查方法,包括:获取电力作业现场的图像;利用所述图像建立基于LLM的图像文本多模态模型,对所述图像文本多模态模型进行第一阶段训练;利用ChatGPT语言模型构造专用于电力作业场景安全风险知识问答的多模态指令跟踪数据;利用所述多模态指令跟踪数据对图像文本多模态模型进行第二阶段训练;向步骤4训练后的图像文本多模态模型输入待纠查电力作业现场的图像Xv和对应自然语言问题指令Xq,生成答案Xa,实现电力作业安全风险辅助纠查。
主权项:1.基于视觉问答的电力作业安全风险辅助纠查方法,其特征在于,包括以下步骤:步骤1、获取电力作业现场的图像;步骤2、建立基于LLM的图像文本多模态模型,对所述图像文本多模态模型进行第一阶段训练;步骤3、利用ChatGPT语言模型构造专用于电力作业场景安全风险知识问答的多模态指令跟踪数据;步骤4、利用所述多模态指令跟踪数据对图像文本多模态模型进行第二阶段训练;步骤5、向步骤4训练后的图像文本多模态模型输入待纠查电力作业现场的图像Xv和对应自然语言问题指令Xq,生成答案Xa,实现电力作业安全风险辅助纠查。
全文数据:
权利要求:
百度查询: 西安理工大学 基于视觉问答的电力作业安全风险辅助纠查方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。