申请/专利权人:喀什地区电子信息产业技术研究院
申请日:2024-01-30
公开(公告)日:2024-04-09
公开(公告)号:CN117851396A
主分类号:G06F16/215
分类号:G06F16/215;G06F16/23;G06F16/2455;G06F16/25;G06F16/28
优先权:
专利状态码:在审-实质审查的生效
法律状态:2024.04.26#实质审查的生效;2024.04.09#公开
摘要:本发明公开了一种基于湖仓一体的数据编目方法及系统,属于数据管理领域,包括:建设数据湖,并将外部数据源中的数据提取到数据湖中;清洗数据湖中的原始数据;为清洗后的数据添加元数据信息并采用多级编目架构进行编目;其中,所述多级编目架构中每个目录针对特定的数据领域进行配置和管理,当外部数据源更新时,通过后台线程定时刷新拉取最新数据并更新元数据。本发明实现多源异构数据的集成、整合和编目,以提供更方便、可靠和高效的并发数据访问和分析。
主权项:1.一种基于湖仓一体的数据编目方法,其特征在于,包括:建设数据湖,并将外部数据源中的数据提取到数据湖中;清洗数据湖中的原始数据;为清洗后的数据添加元数据信息并采用多级编目架构进行编目;其中,所述多级编目架构中每个目录针对特定的数据领域进行配置和管理,当外部数据源更新时,通过后台线程定时刷新拉取最新的数据并更新元数据。
全文数据:
权利要求:
百度查询: 喀什地区电子信息产业技术研究院 一种基于湖仓一体的数据编目方法及系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。