买专利,只认龙图腾
首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

【发明公布】Map任务调度方法、调度装置和Map任务调度系统_中国邮政储蓄银行股份有限公司_202311873471.9 

申请/专利权人:中国邮政储蓄银行股份有限公司

申请日:2023-12-30

公开(公告)日:2024-04-09

公开(公告)号:CN117851009A

主分类号:G06F9/48

分类号:G06F9/48;G06F9/50;G06F16/182

优先权:

专利状态码:在审-实质审查的生效

法律状态:2024.04.26#实质审查的生效;2024.04.09#公开

摘要:本申请提供了一种Map任务调度方法、调度装置和Map任务调度系统,该方法包括:获取输入数据的总数据大小,根据总数据大小计算得到总块数,总块数用于表示输入数据划分成多个数据块的数量;获取所有节点对应的节点处理能力,并根据节点处理能力计算为节点分配的数据块数量,使得节点处理能力与数据块数量正相关,节点与节点处理能力一一对应;按照节点处理能力由强到弱向对应节点分配Map任务,并调用节点执行Map任务,各节点的Map任务的数量与数据块数量正相关。该方法解决了现有技术中在混合异构环境中未考虑不同节点计算能力的差异导致MapReduce性能低下的问题。

主权项:1.一种Map任务调度方法,其特征在于,所述方法包括:获取输入数据的总数据大小,根据所述总数据大小计算得到总块数,所述总块数用于表示所述输入数据划分成多个数据块的数量,所述输入数据为存储于分布式文件系统中的数据;获取所有节点对应的节点处理能力,并根据所述节点处理能力计算为所述节点分配的数据块数量,使得所述节点处理能力与所述数据块数量正相关,所述节点与所述节点处理能力一一对应;按照所述节点处理能力由强到弱向对应所述节点分配Map任务,并调用所述节点执行所述Map任务,各所述节点的所述Map任务的数量与所述数据块数量正相关。

全文数据:

权利要求:

百度查询: 中国邮政储蓄银行股份有限公司 Map任务调度方法、调度装置和Map任务调度系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。