Ambari平台添加节点
场景:
当前集群节点负荷较大,为避免业务繁忙时服务器问题,为集群新增3个节点
参考资料:https://blog.csdn.net/u013850277/article/details/78897993
安装
环境准备
1、服务器系统安装;
2、服务器环境配置:
-
Jdk安装
下载并安装jdk(注意jva版本和Ambari版本的对应)
安装方式:下载安装包jdk-8u162-linux-x64.tar.gz后本地安装创建java目录
mkdir /usr/java将压缩包移动到新建目录
mv xx/xx/jdk-8u162-linux-x64.tar.gz /usr/java解压文件
tar -zxvf jdk-8u162-linux-x64.tar.gz删除压缩包
rm -rf jdk-8u162-linux-x64.tar.gz配置环境变量
vim /etc/profile export JAVA_HOME=/usr/java/jdk1.8.0_162 export CLASSPATH=.:$JAVA_HOME/lib:$JRE_HOME/lib export PATH=$JAVA_HOME/bin:$PATH
使配置生效:source /etc/profile 校验:java -version
注意:如果Ambari启用了Kerberos认证,还需要安装JCE
-
设置yum代理(根据需要设置)
vim /etc/yum.conf
proxy=http://xxx.xxx.xxx:port在/etc/yum.repos.d目录下添加repo文件,如Centos-aliyun.repo
在Armbari Server服务器添加新增节点的域名解析
vim /etc/hosts
xxx.xxx.xxx.xx node6IP地址和域名设置
涉及的配置文件:
/etc/hostname
/etc/sysconfig/network
/etc/sysconfig/network-scripts/ifcfg-eth0系统文件句柄数设置
查询:ulimit -a
设置:ulimit -n 1024-
设置服务器之间的SSH互信
① 拷贝秘钥文件到新增节点服务器:
各节点删除.ssh目录并重新赋权
rm -rf /root/.ssh
mkdir -m 700 /root/.ssh
scp /root/.ssh/id_rsa.pub root@node6:/root/.ssh② 在node6节点创建认证文件:
cat /root/.ssh/id_rsa.pub >> /root/.ssh/authorized_keys③ 验证
ssh node6
exit主服务器秘钥生成命令:
ssh-keygen
cat /root/.ssh/id_rsa.pub >> /root/.ssh/authorized_keys
chmod 700 /root/.ssh
chmod 600 /root/.ssh/authorized_keys -
安装和配置NTP时钟服务
资料:https://www.tecmint.com/install-ntp-server-in-centos/安装NTP服务
yum install ntp① 设置服务器时钟对齐服务器:vim /etc/ntp.conf
server xxx.xx.xx.xx prefer
fudge xxx.xx.xx.xx stratum 9② 创建ntp.drift并赋权
mkdir /var/lib/ntp/ntp.drift
chmod 666 /var/lib/ntp/ntp.drift③ 注册启动服务
systemctl enable ntpd
systemctl start ntpd④ 查看服务状态
ntpq -p 关闭防火墙
systemctl disable firewalld
systemctl stop firewalld关闭SELinux
setenforce 0设置用户创建文件的默认权限
umask 0022
永久生效 echo umask 0022 >> /etc/profile
Ambari平台添加节点
进入Ambari平台,选择Hosts -> Actions -> Add New Hosts
进入新节点添加界面,按照指示操作即可。
添加权限的域名和ssh key
Target Hosts: xxx.xxx.xx
Host Registration Information: id_rsa
Register and ConfirmConfirm Hosts
安装Ambari-agent
检查安装过程中的问题Assign Slaves and Clients
将从属组件和客户端组件分配给要在其上运行它们的主机。
分配了主组件的主机显示为✵。
“Client”将安装HDFS Client,YARN Client,MapReduce2 Client,HBase Client,ZooKeeper Client和Infra Solr Client。Configurations
选择添加的主机所属的配置组。Review
请在安装前查看配置Install, Start and Test
请等待所选服务的安装和启动。