一、准备
1.1、介绍
名称 |
版本 |
说明 |
centos |
7.9 |
随便无所谓 |
openjdk |
1.8.0_291 |
版本1.8x即可 |
hadoop |
2.10.1 |
版本自己看着办 |
spark |
2.4.8 |
版本自己看着办 |
hive |
3.1.2 |
版本自己看着办 |
1.2、机器规格
CPU |
内存 |
系统盘 |
数据盘 |
Mysql数据盘 |
16c |
64G |
200G |
6T×4 |
200G |
二、安装 OpenJDK
2.1、安装 OpenJdk
mkdir -p /usr/java
# 解压
tar xvf jdk-8u291-linux-x64.tar.gz
# 移动到刚刚创建好目录
mv jdk1.8.0_291/ /usr/java/
三、安装 HaDoop 伪分布式模式
3.1、配置环境变量
cat <<'EOF'>> /etc/profile
# JDK
export JAVA_HOME=/usr/java/jdk1.8.0_291
export CLASSPATH=$JAVA_HOME/lib/tools.jar:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib
export PATH=$JAVA_HOME/bin:$PATH
# hadoop
export HADOOP_HOME=/usr/local/hadoop
export LD_LIBRARY_PATH=$HADOOP_HOME/lib/native
export PATH=$HADOOP_HOME/bin:$PATH
# spark
export SPARK_HOME=/usr/local/spark
export PATH=$SPARK_HOME/bin:$PATH
# hive
export HIVE_HOME=/usr/local/hive
export PATH=$PATH:$HIVE_HOME/bin
EOF
# 刷新环境变量
source /etc/profile
赞,学习一下
牛逼,学习一下