如何?測(cè)試Hadoop分布式集群環(huán)境

本篇內(nèi)容主要講解“如何測(cè)試Hadoop分布式集群環(huán)境”，感興趣的朋友不妨來(lái)看看。本文介紹的方法操作簡(jiǎn)單快捷，實(shí)用性強(qiáng)。下面就讓小編來(lái)帶大家學(xué)習(xí)“如何測(cè)試Hadoop分布式集群環(huán)境”吧!

測(cè)試Hadoop分布式集群環(huán)境

首先在通過(guò)Master節(jié)點(diǎn)格式化集群的文件系統(tǒng)：

輸入“Y”完成格式化：

格式化完成以后，我們啟動(dòng)hadoop集群

我們?cè)趪L試一下停止Hadoop集群：

此時(shí)出現(xiàn)了“no datanode to stop”的錯(cuò)誤，出現(xiàn)這種錯(cuò)誤的原因如下：

每次使用 “hadoop namenode -format”命令格式化文件系統(tǒng)的時(shí)候會(huì)出現(xiàn)一個(gè)新的namenodeId，而我我們?cè)诖罱℉adoop單機(jī)偽分布式版本的時(shí)候往我們自己創(chuàng)建的tmp目錄下放了數(shù)據(jù)，現(xiàn)在需要把各臺(tái)機(jī)器上的“/usr/local/hadoop/hadoop-1.2.1/”下面的tmp及其子目錄的內(nèi)容清空，于此同時(shí)把“/tmp”目錄下的與hadoop相關(guān)的內(nèi)容都清空，最后要把我們自定義的hdfs文件夾中的data和name文件夾中的內(nèi)容清空：

把Slave1和Slave2中同樣的內(nèi)容均刪除掉。

重新格式化并重新啟動(dòng)集群，此時(shí)進(jìn)入Master的Web控制臺(tái)：

此時(shí)可以看到Live  Nodes只有三個(gè)，這正是我們預(yù)期的，因?yàn)槲覀僊aster、Slave1、Slave2都設(shè)置成為了DataNode，當(dāng)然Master本身同時(shí)也是NameNode。

此時(shí)我們通過(guò)JPS命令查看一下三臺(tái)機(jī)器中的進(jìn)程信息：

發(fā)現(xiàn)Hadoop集群的各種服務(wù)都正常啟動(dòng)。

至此，Hadoop集群構(gòu)建完畢。

到此，相信大家對(duì)“如何測(cè)試Hadoop分布式集群環(huán)境”有了更深的了解，不妨來(lái)實(shí)際操作一番吧！這里是億速云網(wǎng)站，更多相關(guān)內(nèi)容可以進(jìn)入相關(guān)頻道進(jìn)行查詢(xún)，關(guān)注我們，繼續(xù)學(xué)習(xí)！