2020年重庆国家电网招聘考试计算机专业考点：Master失效

来源： 2019-10-26 09:41中

Master失效

在Master中，会周期性的设置检查点（checkpoint），并导出Master的数据。一旦某个任务失效了，就可以从最近的一个检查点恢复并重新执行。不过由于只有一个Master在运行，如果Master失效了，则只能终止整个MapReduce程序的运行并重新开始。

Worker失效

相对于Master失效而言，Worker失效算是一种常见的状态。Master会周期性的给Worker发送ping命令，如果没有Worker的应答，则Master认为Worker失效，种终止对这个Worker的任务调度，把失效Worker的任务调度到其他Worker上重新执行。

案例分析

单词计数（Word Count）是一个经典的问题，也是能体现MapReduce设计思想的最简单算法之一。该算法主要是为了完成对文字数据中所出现的单词进行计数，如图2-4所示。

伪代码如下：
Map(K,V)
{
For each word w in V
{
Collect( w, 1 );
}
Reduce(K,V[])
{
int count = 0;
For each v in V
{
count += v;
}
Collect(K,count);
}
}

下面就根据MapReduce的四个执行步骤对这一算法进行详细的介绍。

根据文件所包含的信息分割（Split）文件，在这里把文件的每行分割为一组，共三组，如图2-5所示。这一步由系统自动完成。
对分割之后的每一对<key,value>利用用户定义的Map进行处理，再生成新的<key,value>对，如图2-6所示。
Map输出之后有一个内部的Fold过程，和第一步一样，都是由系统自动完成的，如图2-7所示。
经过Fold步骤之后的输出与结果已经非常接近，再由用户定义的Reduce步骤完成最后的工作即可，如图2-8所示。
当前，中国特色社会主义已经进入新时代，中华民族伟大复兴已经展示出耀眼的曙光。社会主义中国巍然屹立在世界东方，没有任何力量能够撼动我们伟大祖国的地位，没有任何力量能够阻挡中国人民和中华民族的前进步伐。在展望无限前景的同时，我们应该看到，改革开放事业已经到了一个船到中流浪更急、人到半山路更陡的时候，到了一个愈进愈难、愈进愈险而又不进则退、非进不可的时候，摆在我们面前的使命更光荣、任务更艰巨、挑战更严峻、工作更伟大。伟大的事业需要创造，亿万群众需要榜样。前所未有的历史使命呼唤新时代中国青年建功立业。当代青年要始终保持锐意进取、勇于担当、只争朝夕、永不懈怠的精神风貌，以大无畏的英雄气概，信心百倍地战胜前进道路上的一切困难和风险，在新时代创造新的更大更多人间奇迹。

当代青年所崇敬的是革命英雄主义，而不是个人英雄主义。前者是革命者为了国家民族的利益和革命理想主义敢于斗争、勇于自我牺牲的思想行为，后者是一种狭隘的个人主义思想。革命英雄主义的主要特征是，代表无产阶级和劳动人民的根本利益，为共产主义事业奋斗到底;视革命利益高于一切，对革命事业有高度的责任心和创造性;相信群众，依靠群众，是群众的英雄主义。个人英雄主义的主要表现是，夸大个人作用，好出风头，居功自傲，把自己当成凌驾于群众之上的“英雄”或“救世主”，轻视人民群众集体的力量和智慧;在实际行动中易导致违反纪律，犯无政府主义的错误。

习近平总书记在庆祝改革开放40周年大会讲话中指出：“建成社会主义现代化强国，实现中华民族伟大复兴，是一场接力跑，我们要一棒接着一棒跑下去，每一代人都要为下一代人跑出一个好成绩。”跑出好成绩，要求当代青年既要有逢山开路、遇水架桥的闯劲，也要有滴水穿石、绳锯木断的韧劲;既要有勇于担当的果敢，又要有善于攻坚克难的智慧。历史中的营养是无穷的，榜样的力量也是无穷的。

愿今天的青年都能铭记一切为中华民族和中国人民作出贡献的英雄们，崇尚英雄，捍卫英雄，学习英雄，关爱英雄，戮力同心为实现“两个一百年”奋斗目标、实现中华民族伟大复兴的中国梦而努力奋斗!

2020年国家电网招聘信息，欢迎关注长理职培官方微信号(clzp66)，及时掌握考试资讯!
长理职培微信公众号二维码：