免费论文摘要：鉴于HDFS的洪量文献保存体例的安排与实行

跟着互联网络的赶快兴盛，在咱们的体例中保存着形形色色的数据，如日记、图片、音频、视频等。暂时，很多企业运用HDFS（Hadoop Distributed FileSystem）动作底层保存体例。HDFS是为运转在商用集群上，以流式数据考察形式保存超大文献而安排的文献体例，面临本质消费情况中，品种稠密、巨细纷歧的数据，HDFS没辙很好地满意现有的需要，更加是HDFS Namenode的安排很简单变成体例瓶颈，当洪量文献出此刻HDFS中时，洪量的文献元数据会将HDFS Namenode的外存耗尽。所以，鉴于HDFS的洪量文献保存本领的接洽是HDFS关系范围的要害课题。 正文对HDFS现有的体制框架结构举行了深刻的接洽与商量，并在此普通上提出了多集群的办法来处置HDFS Namenode外存负载过重的本领计划，并贯串本质的交易需要，实行了一个不妨扶助洪量文献保存的文献体例，提防处置了多集群形式下运用Consistent Hash算法实行HDFS集群的采用、通讯和议的安排、文献目次处置、文献保存处置、文献读写锁、租约体制以及缓存体制的安排与实行。结果，经过功效尝试、本能尝试以及其它关系的尝试，考证该本领计划灵验地普及了HDFS Namenode外存资源的运用率及体例的相应速率，减少了HDFS Namenode的负载压力，表明保存体例的可用性。 暂时，保存体例已居于宁静运奇迹态，试验证领会体例安排的灵验性，普及了保存体例的完全本能，处置了企业的本质题目。 要害词：HDFS，HBase，ZooKeeper

来源：半壳优胜鲸鱼幸运星转载请保留出处和链接！

本文链接：http://87cpy.com/294290.html