买专利,只认龙图腾
首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

【发明公布】一种基于专有化数据集的数据湖管理方法及系统_杭州比智科技有限公司_202310053407.X 

申请/专利权人:杭州比智科技有限公司

申请日:2023-02-03

公开(公告)日:2023-03-17

公开(公告)号:CN115809249A

主分类号:G06F16/22

分类号:G06F16/22;G06F16/25;G06F16/27;G06F16/28;G06F18/22

优先权:

专利状态码:有效-授权

法律状态:2023.04.25#授权;2023.04.04#实质审查的生效;2023.03.17#公开

摘要:本发明公开了一种基于专有化数据集的数据湖管理方法及系统,所述方法包括以下步骤:S1,专有化数据集判定;专有化数据集是一种描述数据特征的概念,用于将数据切分为具有相似特性的数据集;S2,专有化数据集逻辑和物理设计;专有化数据集以树形目录结构的形式进行表存储;S3,专有化数据集创建和管理;通过入湖作业的方式来生成专有化数据集,通过专有化数据集元数据管理、专有化数据集数据存储和专有化数据集生命周期管理对专有化数据集进行管理;S4,专有化数据集统一使用;专有化数据集通过标准协议的方式输出,将数据映射为表,对表进行分析使用。本发明能够实现数据湖元数据标准化,以便通过元数据达到对数据湖数据的管理和使用。

主权项:1.一种基于专有化数据集的数据湖管理方法,其特征在于,所述方法包括以下步骤:步骤S1,专有化数据集判定;专有化数据集是一种描述数据特征的概念,用于将数据切分为具有相似特性的数据集;定义同一性质的数据集合为专有化数据集;步骤S2,专有化数据集逻辑和物理设计;每个专有化数据集中包含一些专有化数据集的基本属性和数据的属性,专有化数据集以树形目录结构的形式进行表存储;步骤S3,专有化数据集创建和管理;通过入湖作业的方式来生成专有化数据集,通过专有化数据集元数据管理、专有化数据集数据存储和专有化数据集生命周期管理对专有化数据集进行管理;步骤S4,专有化数据集统一使用;专有化数据集通过标准协议的方式输出,将数据映射为表,对表进行分析使用。

全文数据:

权利要求:

百度查询: 杭州比智科技有限公司 一种基于专有化数据集的数据湖管理方法及系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。