合肥金星智控科技股份有限公司
宣传

位置:北方有色 >

有色技术频道 >

> 失效分析技术

> MapReduce任务的容错调度方法

MapReduce任务的容错调度方法

860   编辑:管理员   来源:北方有色网  
2023-03-19 09:01:43
本发明涉及云计算环境中并行任务的调度处理方法,公开一种针对MapReduce作业的容错调度方法,以提高MapReduce作业的整体性能,减少节点失效时的作业延迟。本发明结合检查点和主动复制两种技术,在Mapper任务执行时创建本地检查点和索引检查点两种检查点,当任务发生失效时,本地检查点能够将出错任务的状态和执行恢复到检查点处,减少了任务的重复执行时间;当发生节点失效时,副本节点能够根据索引检查点快速构造出失效节点上执行的mapper任务的中间结果数据,大大减少了重调度任务的执行时间。实验结果表明该方法能够比Hadoop的运行时性能提高30%以上,同时并不明显增加系统的存储和网络开销。
声明:
“MapReduce任务的容错调度方法” 该技术专利(论文)所有权利归属于技术(论文)所有人。仅供学习研究,如用于商业用途,请联系该技术所有人。
我是此专利(论文)的发明人(作者)
         
咨询细节
标签:
失效分析
有色金属设备
有色金属技术
有色金属企业
有色金属资讯
有色金属价格
有色金属报告
热门分类
没资质千万别碰!无证回收废电池违法! 填补国内空白!中国首个分布式光伏建设领域安全规程正式发布实施 冶金百科 | 金银冶金 - 金的物理和化学性质是什么? 金的主要化合物有哪些? 被关停!紫金矿业刚果(金)铜钴矿部分产品辐射含量超标 新技术 | 3D打印与传统加工工艺材料、晶格结构的性能差异 冶金百科 | 铜冶金-火法炼铜小知识(一) 展商推荐 | 威格科技(苏州)股份有限公司邀您出席第三届全国钒钛资源与储能科技大会 矿山安全 | 露天矿山开采的五大防护措施 2.06亿元“抢滩”固态电池:华域汽车收购上汽清陶49%股权背后的三重逻辑 铜业百科 | 辨别纯铜的方法有哪些 冶金百科 | 锌冶金 - 湿法炼锌(一) 未来科技:太阳能面板与电池搭载无人机,随时随地享受阳光充能! 欣旺达在固态电池领域取得突破性进展,预计2025年完成产品开发 中原关键金属实验室主任何季麟:建设国家级关键金属创新高地 最快2023年上市!超级“核电池”无需充电能正常使用90年之久 铝合金应用难题被攻克,服役温度从350℃提升至500℃ 南山铝业第一家海外电解铝项目将落户印尼,规划产能为100万吨 2025年锂电池行业十大变革性技术 2025年锂电行业变革:十大关键技术引领行业洗牌 2025年8月中国动力电池行业报告:龙头企业优势明显 市场竞争加剧,锂电企业纷纷拿出“杀手锏” 维里迪斯矿业公司稀土矿项目回收率达到世界最高水平 班坎金矿凸显潜力,或有望成为几内亚最大金矿 亿纬锂能:2023年实现总营收飙升,同比增长34.38% 冶金百科 | 铝冶金——拜耳法生产氧化铝 原来他们都是中南大学杰出校友! 有色金属冶炼行业节能降碳改造升级实施指南 冶金百科 | 稀土冶金 - 稀土元素原子半径及离子半径变化规律是什么,何谓镧系收缩? 新能源产业发展方向明确!全国首部新能源产业促进条例发布 西工大王锦程团队:难熔高熵合金激光增材制造取得新突破!
北方有色技术平台

最新更新技术

报名参会
更多+

热门专家
更多+

刘建有色金属专家
刘建

教授/博士生导师/省部共建复杂有色金属资源清洁利用国家重点实验室副主任

潘宇有色金属专家
潘宇

在读硕士研究生

报告下载

铼产业报告(2026)
推广

热门技术
更多+

衡水宏运压滤机有限公司
宣传

慧博士报告
更多+

环磨科技控股(集团)有限公司
宣传

发布

在线客服

公众号

电话

顶部
咨询电话:
010-88793500-807
专利人/作者信息登记