免费论文摘要：Hadoop功课及工作消息监测东西的安排与实行

连年来，云计划平台的运用日新月异，对平台本能的诉求日益增高。数据重心运转着多种处置大数据的散布式数据处置平台，个中Hadoop已变成合流平台，对其本能的接洽与优化以及对平台的二次开拓变成了暂时云计划接洽的热门实质，也是暂时稠密数据重心关怀的实质及将来的兴盛目标。 暂时，诸普遍据重心中的集群都由异构节点形成的，运转的运用也是搀和型的，集群中同声运转着两种或多种各别典型的运用，典范的运用有CPU聚集型、I/O聚集型的。因为集群的异构性与运用的反复无常性，引导Hadoop平台在异构情况下本能遭到了较大的感化。但是，现有的对准Hadoop平台的监测东西却没辙获得所有的消息来反应出Hadoop本能低沉的题目地方。安排消息搜集东西的难点在乎怎样决定感化Hadoop本能的关系数据、怎样传播搜集的数据消息使得对原有Hadoop平台的本能感化最小。正文鉴于领会运用特性与体例参数之间联系的截止，决定监测东西所须要获得的数据消息，安排并实行了消息搜集东西，简单遥远对Hadoop平台举行本能评价和优化。监测东西重要包括三个功效模块：获得功课消息模块、获得工作消息模块、获得资源消息模块，消息发送与接受模块。 正文安排的消息监测东西已胜利在Hadoop-0.21本子中实行。经过试验的尝试，正文所安排的消息监测东西对原有Hadoop平台体例的感化大约为1%-2%，胜利获得功课、工作、资源的消息。

来源：半壳优胜鲸鱼幸运星转载请保留出处和链接！

本文链接：http://87cpy.com/294244.html