hadoop cdh5.1對centos系統(tǒng)本身的配置要求是什么

這篇文章主要為大家展示了“hadoop cdh5.1對centos系統(tǒng)本身的配置要求是什么”，內(nèi)容簡而易懂，條理清晰，希望能夠幫助大家解決疑惑，下面讓小編帶領(lǐng)大家一起研究并學(xué)習(xí)一下“hadoop cdh5.1對centos系統(tǒng)本身的配置要求是什么”這篇文章吧。

當(dāng)運行任務(wù)的時候，nodemanager 或報出如下錯誤

java.lang.OutOfMemoryError: unable to create new native thread

解決方式：配置linux本身。

echo "100000" > /proc/sys/kernel/pid_max     

echo "200000" > /proc/sys/vm/max_map_count 

針對centos6.5，追加如下文件

vi /etc/security/limits.d/90-nproc.conf

*          soft    nproc     unlimited

root       soft    nproc     unlimited

 追加如下內(nèi)容

 /etc/security/limits.conf

*  soft nofile  65535

*  hard nofile  65535

*  hard  nproc  100000

*  soft    nproc           100000 

ulimit -a 需要配置如下：

例如open files

max user processes

/home/game/.bash_profile 最后一行放

ulimit -u 65535

[ @  sbin]$ ulimit -a

core file size          (blocks, -c) 0

data seg size           (kbytes, -d) unlimited

scheduling priority             (-e) 0

file size               (blocks, -f) unlimited

pending signals                 (-i) 514847

max locked memory       (kbytes, -l) 64

max memory size         (kbytes, -m) unlimited

open files                      (-n) 65535

pipe size            (512 bytes, -p) 8

POSIX message queues     (bytes, -q) 819200

real-time priority              (-r) 0

stack size              (kbytes, -s) 10240

cpu time               (seconds, -t) unlimited

max user processes              (-u) 65535

virtual memory          (kbytes, -v) unlimited

file locks                      (-x) unlimited

以上是“hadoop cdh5.1對centos系統(tǒng)本身的配置要求是什么”這篇文章的所有內(nèi)容，感謝各位的閱讀！相信大家都有了一定的了解，希望分享的內(nèi)容對大家有所幫助，如果還想學(xué)習(xí)更多知識，歡迎關(guān)注億速云行業(yè)資訊頻道！