申请/专利权人：中通服创立信息科技有限责任公司

申请日：2021-09-28

公开（公告）日：2024-04-23

公开（公告）号：CN113868253B

主分类号：G06F16/22

分类号：G06F16/22;G06F21/60;G06F21/62

优先权：

专利状态码：有效-授权

法律状态：2024.04.23#授权;2022.01.21#实质审查的生效;2021.12.31#公开

摘要：本发明公开了一种数据关系捕获及大数据关系树构建方法，涉及大数据处理领域，其技术要点是：将关系性数据和非关系性数据集成获取数据血缘的元数据，对元数据进行定义，基于定义的元数据创建实体；执行SQL语言触发变更组件进行元数据实体变更，捕获钩子自动捕获变更信息生成元数据变更细节，对元数据变更细节进行解析生成单系统的数据血缘谱系图；将数据血缘谱系图存储至图数据库，并通过私钥进行加密，将加密数据通过消息队列同步到数据血缘交换空间，进而构建跨系统的大数据血缘关系树。本发明从单应用系统数据血缘同步上报到跨系统血缘最终同步下发，形成血缘关系树从数据获取、跨应用系统血缘计算、血缘树构建到下发的完整闭环。

主权项：1.一种数据关系捕获及大数据关系树构建方法，其特征在于，包括以下步骤：将关系性数据和非关系性数据集成获取数据血缘的元数据，对元数据进行定义，基于定义的元数据创建实体；其中，元数据定义包括对元数据进行别名、分类及标签，其中，通过别名生成元数据的类型，通过标签与分类将元数据相互关联或将元数据和数据资产关联，按不同的分类对元数据进行管理，按分类的层次表达元数据的业务范围，通过标签和分类传播数据血缘依赖；元数据根据类型进行建模并表示为实体，类型通过name唯一标识，每个类型有一个元类型，实体是类型的特定值或特定列，实体由唯一标识符标识；执行SQL语言触发变更组件进行元数据实体变更，捕获钩子自动捕获变更信息生成元数据变更细节，对所述元数据变更细节进行解析生成单系统的数据血缘谱系图；其中，元数据实体变更包括对元数据进行创建变更删除操作；通过不同类型的捕获钩子自动捕获元数据的创建更新删除操作生成元数据变更细节的输出列和一组输入列或输入表，将输出列和一组输入列或输入表相关联生成数据血缘依赖谱系图，并将元数据变更细节信息内容推送至消息队列进行元数据的更新；其中，信息内容包括实体创建信息、实体更新信息、实体删除信息、字段创建信息、字段更新信息及字段删除信息；将数据血缘谱系图存储至图数据库，并通过私钥进行加密，将加密数据通过消息队列同步到数据血缘交换空间，进而构建跨系统的大数据血缘关系树；其中，构建跨系统的大数据血缘关系树的具体步骤如下：各应用系统在血缘交换空间申请公私钥，私钥由系统持有，公钥由血缘交换空间保留，用于数据解密时使用；各应用系统通过自有私密钥将数据血缘谱系图进行加密，实时将加密数据通过消息队列同步到血缘交换空间；血缘交换空间采用对应系统的公钥对单个系统的血缘谱系数据进行解密，再根据当前最新的各个系统的血缘谱系数据，进行实时计算，打通并完善系统间数据血缘关系，进而绘制大数据血缘关系树。

全文数据：

权利要求：

百度查询： 中通服创立信息科技有限责任公司 一种数据关系捕获及大数据关系树构建方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD