在Hadoop2.X/YARN環(huán)境下如何搭建CentOS7.0系統(tǒng)配置

這篇文章主要講解了“在Hadoop2.X/YARN環(huán)境下如何搭建CentOS7.0系統(tǒng)配置”，文中的講解內容簡單清晰，易于學習與理解，下面請大家跟著小編的思路慢慢深入，一起來研究和學習“在Hadoop2.X/YARN環(huán)境下如何搭建CentOS7.0系統(tǒng)配置”吧！

一、我緣何選擇CentOS7.0

    14年7月7日17:39:42發(fā)布了CentOS 7.0.1406正式版,我曾使用過多款Linux，對于Hadoop2.X/YARN的環(huán)境配置緣何選擇CentOS7.0，其原因有：

1、界面采用RHEL7.0新的GNOME界面風，這可不是CentOS6.5/RHEL6.5所能比的！（當然，F(xiàn)edora早就采用這種風格的了，但是現(xiàn)在的Fedora缺包已然不成樣子了）

2、曾經，我也用了RHEL7.0，它最大的問題就是YUM沒法用，而且總會有Warning提示注冊購買！為此，必須去修改YUM源，還有修改其他的文件使之不提示才能用，看了這么麻煩，想必有很多童鞋滴心就已經涼了4/7了吧！

3、當然，Ubuntu系列我用過Ubuntu14.04/12.04和elementaryOS,不知為何，一用Ubuntu14.04就覺得好丑呀??！但是有很多人都說CentOS和RHEL更丑，但殊不知哪個才是企業(yè)級的，那個才是霸主。

另一方面，要求視覺效果的話，建議去裝個elementaryOS試試，當然，elementaryOS也有缺陷：它已經許久沒有提供更新了，12年推出的，已逾2年未曾發(fā)布新版本的系統(tǒng)，也未曾更新網(wǎng)站，與此同時，elementaryOS的模型Ubuntu早就更新?lián)Q代了，所以，暴露了不少問題，其中麻煩的是不要隨意更新系統(tǒng)，否則黑屏，那就真的純命令行了，漂亮的系統(tǒng)突然被打回原型，那心鐵定疤涼疤涼的，而且它更新后的apt-get是無法安裝某些匹配某些，所以elementaryOS只供欣賞把玩！

4、也有人用過openSUSE，據(jù)說是最華麗的系統(tǒng)，在我看來，花哨的KDE打開文件/軟件時顯示的一跳一跳的，我心里就癢癢的，沒事兒你弄個沒用又難看的東東干嘛？？干嘛？？另外，最新的openSUSE對中文的設計的確無法令人滿意。另外，就是openSUSE的環(huán)境不怎么熟悉，歐洲人設計的GNU/Linux還有些難適應，當然，我也不打算改旗易幟向歐洲SUSE倒戈。

其實，GNU/Linux版本眾多，選擇一個適合自己的一款一直玩下去、用下去就足夠了，Linux版本眾多，設計各有千秋，但使用大同小異，了解“異”點即可！當然，還是奉勸一句：初學者僅僅跑跑虛擬機看看效果就好，莫要將每款都用會了！畢竟，體驗也是學習的動力之一！

二、體驗CentOS7與之前版本的“異”

初次啟動

裝完機后，開機進系統(tǒng)的界面換了，乍一看以為是兩個內核，原來有一個是rescue選擇，而且按e后，會發(fā)現(xiàn)所有的grub.conf的信息全出來了，好不容易找到內核啟動的地方，寫了個 1（要進單用戶模式），然后進了rescue模式。

字符界面

進系統(tǒng)后，是圖形界面，想進字符界面，結果找到/etc/inittab，發(fā)現(xiàn)幾乎是個空文件，文件中提示想改runlevel的話，可以把/lib/systemd/system/runlevel*.target 軟連到 /etc/systemd/system/default.target下（當然考過來，覆蓋也行），試了一下還行，能改到字符界面runlevel3。

配置網(wǎng)絡和主機名

然后，想配置網(wǎng)絡，進/etc/sysconfig/network-script/一看，我靠，網(wǎng)卡改名了enp1s5，好有趣，配置完網(wǎng)絡后改主機名， 到/etc/sysconfig/network去改名字，發(fā)現(xiàn)這個文件也是空的，按原6版本的去修改，重啟后沒效果，man了一下hostname， 發(fā)現(xiàn)7中改名要到/etc/hostname去改名字。

本地yum源和掛載

接著，想配置一個本地yum源，配上后要掛光盤，手動掛上了，然后直接echo“mount ......”到rc.local中，畢竟是啟動執(zhí)行腳本，重啟之后竟然沒掛上，進去rc.local中看了一下，7中竟然要手動的把chmod +x rc.local, 是的，要手動加執(zhí)行權限，難道我之前裝的6以前的系統(tǒng)中這個都要手動加執(zhí)行權限，我不記得?。。。?！ 當然，加了權限后，開機后啟動執(zhí)行了rc.local的mount命令。

LVM和xfs

后來，想著裝一個lvm玩玩，于是啊就分區(qū)，格式化（特意格式化為了xfs），pv，vg，lv一步一步，都沒問題，然后想著放大，縮小，這時出問題了，執(zhí)行resize2fs時，怎么一直報superblock什么的出錯，這是怎么回事，然后man resize2fs一下，發(fā)現(xiàn)這命令只支持ext的文件系統(tǒng)，我艸，那我裝系統(tǒng)是怎么是lvm的，這個問題我還沒解決，應該有解決方法。

dhcp和服務

接著，想著裝一個dhcp玩玩，驚奇的發(fā)現(xiàn)所有dhcp的包裝上之后，不能service dhcpd start，然后發(fā)現(xiàn)/etc/init.d/中竟然沒一個dhcp類似的東西，畢竟6之前有dhcpd,dhcpd6,dhcrelay的，然后發(fā)現(xiàn) /sbin/dhcpd有啟動文件，難道，難道，以后的服務想service啟，都要手動自己編？錯了，是在/usr/lib/systemd/system/dhcpd.service,還要修改好多，然后加權限，執(zhí)行service 服務 restart/stop。。。。。。可以，但是指向了systemctl restart/start/stop 服務.service

iptables

又發(fā)現(xiàn)iptables這次也不是作為一個服務在/etc/init.d/下面了，/sbin下有；

防火墻由iptables更換成了firewalld

三、系統(tǒng)配置之關閉防火墻

systemctl stop firewalld.service #停止firewall

systemctl disable firewalld.service #禁止firewall開機啟動

systemctl命令的基本操作格式是：

systemctl   動作   服務名.service
動作：start,stop,restart,status,enable,disable,is-enabled

四、配置Linux網(wǎng)絡

1、修改hostname

CentOS 7.0的hostname在/etc/hostname中用root用戶修改：

[root@hadoop1 ~]# vim /etc/hostname    #編輯/etc/hostname
[root@hadoop1 ~]# cat /etc/hostname    #查看/etc/hostname
hadoop1
[root@hadoop1 ~]#

以前版本的CentOS在/etc/sysconfig/network中用root用戶修改：

[root@hadoop1 ~]# vim /etcsysconfig/network

"/etc/sysconfig/network"的設定項目如下：

NETWORKING 是否利用網(wǎng)絡
GATEWAY 默認網(wǎng)關與接下來配置IP的屬性文件中默認網(wǎng)關一致
IPGATEWAYDEV 默認網(wǎng)關的接口名
HOSTNAME 主機名
DOMAIN 域名

reboot后hostname生效

2、修改當前機器的IP

        Step1:進入配置文件目錄

        現(xiàn)在已經是root權限了，我們cd到網(wǎng)絡配置文件的目錄，并列出目錄下的文件。

Step2:修改配置文件

該目錄下，文件名“ifcfg-ens192”文件就是網(wǎng)絡配置的主文件。vi它!

修改或添加一下：

ONBOOT=yes  
BOOTPROTO=static  
IPADDR=IP地址  
NETMASK=255.255.255.0 #子網(wǎng)掩碼 
GATEWAY=192.168.30.1  #網(wǎng)關地址

Step3:重啟網(wǎng)絡服務

修改完配置文件后，:wq!保存退出！然后重啟網(wǎng)絡。

Step4:測試

通過ifconfig命令查看ip是否設置成功，然后ping一下網(wǎng)絡。這個時候應該成功了！

3、修改DNS(看情況，非必選)

若網(wǎng)絡環(huán)境有DNS要求,則配置,否則，勿配！

格式：

nameserver DNS地址

[root@hadoop1 ~]# vi /etc/resolv.conf 
nameserver 202.131.80.1  #依需求而定 
nameserver 202.131.80.5  #依需求而定

4、配置hosts文件

"/etc/hosts"這個文件是用來配置主機將用的DNS服務器信息，是記載LAN內接續(xù)的各主機的對應[HostName和IP]用的。當用戶在進行網(wǎng)絡連接時，首先查找該文件，尋找對應主機名（或域名）對應的IP地址。

我們要測試兩臺機器之間知否連通，一般用"ping 機器的IP"，如果想用"ping 機器的主機名"發(fā)現(xiàn)找不見該名稱的機器，解決的辦法就是修改"/etc/hosts"這個文件，通過把LAN內的各主機的IP地址和HostName的一一對應寫入這個文件的時候，就可以解決問題。

例如：機器為"hadoop1:59.67.107.80"對機器為"hadoop2:59.67.107.79"用命令"ping"記性連接測試。測試結果如下：

從上圖中的值，直接對IP地址進行測試，能夠ping通，但是對主機名進行測試，若沒有ping通，提示"unknown host——未知主機"，這時查看"hadoop1"的"/etc/hosts"文件內容。

若ping hadoop1不通則顯示：

若ping hadoop1通則顯示：

若發(fā)現(xiàn)里面沒有"59.67.107.79 hadoop2"內容，故而本機器是無法對機器的主機名為"hadoop2" 解析。

在進行Hadoop集群配置中，需要在"/etc/hosts"文件中添加集群中所有機器的IP與主機名，這樣Master與所有的Slave機器之間不僅可以通過IP進行通信，而且還可以通過主機名進行通信。所以在所有的機器上的"/etc/hosts"文件末尾中都要添加如下內容：

因為本文以已經配置好的環(huán)境說明，所以我的/etc/hosts顯示：

一般處于內網(wǎng)下，照此添加(192.168.1.1為網(wǎng)關)：

192.168.1.2 hadoop1
192.168.1.3 hadoop2
192.168.1.4 hadoop3
192.168.1.5 hadoop4

用以下命令進行添加：

vim /etc/hosts

現(xiàn)在我們在進行對機器為"hadoop2"的主機名進行ping通測試，看是否能測試成功。

從上圖中我們已經能用主機名進行ping通了，說明我們剛才添加的內容，在局域網(wǎng)內能進行DNS解析了，那么現(xiàn)在剩下的事兒就是在其余的Slave機器上進行相同的配置。然后進行測試。

感謝各位的閱讀，以上就是“在Hadoop2.X/YARN環(huán)境下如何搭建CentOS7.0系統(tǒng)配置”的內容了，經過本文的學習后，相信大家對在Hadoop2.X/YARN環(huán)境下如何搭建CentOS7.0系統(tǒng)配置這一問題有了更深刻的體會，具體使用情況還需要大家實踐驗證。這里是億速云，小編將為大家推送更多相關知識點的文章，歡迎關注！