买专利,只认龙图腾
首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

【发明公布】一种不均衡数据的异常识别与修复方法及系统_烟台海颐软件股份有限公司_202311785567.X 

申请/专利权人:烟台海颐软件股份有限公司

申请日:2023-12-22

公开(公告)日:2024-03-22

公开(公告)号:CN117743938A

主分类号:G06F18/241

分类号:G06F18/241;G06F18/213;G06F18/232;G06N3/0455

优先权:

专利状态码:在审-实质审查的生效

法律状态:2024.04.09#实质审查的生效;2024.03.22#公开

摘要:本发明属于数据治理技术领域,具体涉及一种不均衡数据的异常识别与修复方法及系统。所述方法包括不均衡混合数据聚类分析、异常数据识别与特征定位、异常数据修复三部分内容,首先提出了基于代价优化的混合聚类算法,解决不均衡数据集下混合数据的有效聚类问题,实现同一聚类簇内数据具有高度相似性;其次提出一种基于孤立森林的异常特征定位算法,解决以往无监督异常检测算法仅能定位到异常记录而无法识别记录中具体异常特征的问题,实现问题数据的准确定位;最后提出基于异构变分自编码器的数据修复模型,实现对混合数据异常的可信修复,解决以往人工智能方法在数据修复过程中受数据分布和噪声数据干扰过大导致修复数据可信度不高的问题。

主权项:1.一种不均衡数据的异常识别与修复方法,其特征在于,包括以下步骤:步骤1.对输入的不均衡混合数据的特征类型进行识别,所述特征类型包括:分类型和数值型;步骤2.基于代价优化的混合聚类算法构建模型,综合考虑不均衡混合数据特征间的差异程度,对不均衡混合数据进行聚类分析,从而将不均衡混合数据划分为不同的簇;步骤3.基于孤立森林的异常特征定位算法构建模型,对聚类之后的每个簇内的异常数据进行识别并定位其具体异常特征;步骤4.构建基于异构变分自编码器的数据修复模型,对混合数据异常及缺失进行修复。

全文数据:

权利要求:

百度查询: 烟台海颐软件股份有限公司 一种不均衡数据的异常识别与修复方法及系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。