仅以此篇记录虚拟机linux安装hadoop3.3.4的过程,以昨日后学习之用
本篇是为了安装hive,此篇文章介绍安装hadoop集群配置+jdk配置,本篇文章只会列出文章大纲,因为相关作者写的太详细了,按着步骤来就行。
一.开始准备
原文链接:https://blog.csdn.net/Python_XTyyds/article/details/128246797
二.Hadoop部署模式
原文链接:https://blog.csdn.net/Python_XTyyds/article/details/128248861
三.Hadoop集群配置
原文链接:https://blog.csdn.net/Python_XTyyds/article/details/128277601
四.Hadoop集群测试
原文链接:https://blog.csdn.net/Python_XTyyds/article/details/128277628
文章主要的指令如下:
- 将master虚拟机上的hadoop发送到slave1虚拟机上
scp -r $HADOOP_HOME root@slave1:$HADOOP_HOME
个人百度云下载链接地址:
mysql-5.7.27
链接:https://pan.baidu.com/s/1AIhTd-ppwYKWR0LB37Z1zQ 提取码:x6SX
hadoop-3.3.4
链接:https://pan.baidu.com/s/1aGZ9SmmJcEoerxeDt5KvaQ 提取码:11x6
jdk-8u231
链接:https://pan.baidu.com/s/1H7WzccdJf-fcMUj-2Fxr-A 提取码:66c5
mysql-connection8.0.32
链接:https://pan.baidu.com/s/14g7JxOONtYWvnVgcbGbz3A 提取码:bLrs
zookeepeer3.4.10
链接:https://pan.baidu.com/s/1eR0Lm_LezJsq9RmDl354YQ 提取码:B46G
有坑:后续hive启动hiveserver2缺少配置需要加上
#core-site.xml添加
<property>
<name>hadoop.proxyuser.root.hosts</name>
<value>*</value>
</property>
<property>
<name>hadoop.proxyuser.root.groups</name>
<value>*</value>
</property>