恭喜广东南方数码科技股份有限公司吴宝佑获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网恭喜广东南方数码科技股份有限公司申请的专利时空大数据的任务调度方法、装置及存储介质获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN119739745B 。
龙图腾网通过国家知识产权局官网在2025-05-16发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202510259257.7,技术领域涉及:G06F16/2453;该发明授权时空大数据的任务调度方法、装置及存储介质是由吴宝佑;俞志宏;钟勇;陈鋆泓设计研发完成,并于2025-03-06向国家知识产权局提交的专利申请。
本时空大数据的任务调度方法、装置及存储介质在说明书摘要公布了:本发明涉及大数据技术领域,公开了一种时空大数据的任务调度方法、装置及存储介质,其中,该方法包括:对原始时空数据进行ETL清洗和标准化处理,得到符合OGC规范的统一格式时空数据;对所述统一格式时空数据进行空间降维运算并构建时空索引,得到时空索引数据集;将所述统一格式时空数据按照时空特征进行分布式存储并压缩,得到分区压缩数据;对所述分区压缩数据建立多维度查询索引,得到任务分配方案;基于所述任务分配方案执行分布式数据检索,得到原始查询结果;对所述原始查询结果进行数据完整性校验和空间关系重构,得到目标查询数据。该方法实现了计算资源的合理分配,有效降低各节点性能压力,提升了数据的可用性和互操作性。
本发明授权时空大数据的任务调度方法、装置及存储介质在权利要求书中公布了:1.一种时空大数据的任务调度方法,其特征在于,所述方法包括:对原始时空数据进行ETL清洗和标准化处理,得到符合OGC规范的统一格式时空数据;通过空间填充曲线算法对所述统一格式时空数据进行空间降维运算并构建时空索引,得到时空索引数据集;根据所述时空索引数据集确定数据分区策略,将所述统一格式时空数据按照时空特征进行分布式存储并压缩,得到分区压缩数据;具体包括:基于所述时空索引数据集进行数据分区规划,将具有相近空间位置及时间特征的数据划分为同一分区,得到初始分区方案;其中,得到初始分区方案包括:对时空索引数据集执行特征分解运算,将时空特征分离为全局动态特征和局部时变特征,得到特征分解数据;基于特征分解数据构建双层特征表示模型,对全局动态特征进行时空稳定性分析,得到全局特征向量;对局部时变特征执行时序相关性计算,提取局部时空变化模式,得到局部特征向量;将全局特征向量和局部特征向量输入互信息约束模型,计算特征独立性得分,得到特征解耦数据;根据特征解耦数据建立分区映射关系,将相似特征模式的数据聚类分组,得到分区聚类结果;对分区聚类结果进行空间连续性优化,合并临近分区并消除碎片化分区,得到优化分区方案;基于优化分区方案构建分区自适应机制,动态调整分区边界和大小,得到动态分区数据;将动态分区数据进行时空一致性校验,对分区划分结果进行合理性验证,得到初始分区方案;对所述初始分区方案中的每个分区进行大小阈值检测,按照预设阈值对数据进行分片处理,得到分区分片数据;将所述分区分片数据输入MMP分布式存储架构,在存储节点上配置独立缓存空间,得到分布式缓存数据;对所述分布式缓存数据进行压缩算法分析,根据数据特征选择最优压缩算法进行数据压缩,得到节点压缩数据;基于所述节点压缩数据建立主从复制机制,对压缩后的数据进行备份同步,得到备份数据集,并对所述备份数据集建立分区索引表,记录数据分布信息和存储位置映射关系,得到分区压缩数据;对所述分区压缩数据建立多维度查询索引,得到任务分配方案;基于所述任务分配方案执行分布式数据检索,得到原始查询结果;对所述原始查询结果进行数据完整性校验和空间关系重构,得到目标查询数据。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人广东南方数码科技股份有限公司,其通讯地址为:510000 广东省广州市天河区科韵路24、26号四楼;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。