柚子快報(bào)邀請(qǐng)碼778899分享：hadoop DHFS偽分布式

http://yzkb.51969.com/

永久關(guān)閉防火墻 #systemctl disable firewalld

網(wǎng)卡開機(jī)自啟 安裝 wget # yum install –y wget

清空源倉(cāng)庫(kù)后，安裝 Centos7 阿里源 #wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo

重新生成 yum 源緩存 # yum makecache

安裝 SSH 客戶端 # sudo yum -y install openssh-clients openssh-server

?

安裝 JDK # sudo yum -y install java-1.8.0-openjdk java-1.8.0-openjdk-devel

?

編輯變量環(huán)境 # vim ~/.bashrc export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk

?

執(zhí)行環(huán)境變量 source ~/.bashrc 查看 java 的版本信息,看到下圖所示表示配置成功 java -version # $JAVA_HOME/bin/java -version

?

安裝 hadoop，如果網(wǎng)速慢把軟件包上傳即可

wget https://archive.apache.org/dist/hadoop/common/hadoop-2.7.4/hadoop-2.7.4.tar.gz

將 Hadoop 安裝到 /usr/local 目錄下:

# tar -zxf hadoop-2.7.4.tar.gz -C /usr/local/

cd /usr/local

mv ./hadoop-2.7.4/ ./hadoop

查看 hadoop 版本

/usr/local/hadoop/bin/hadoop version

?

設(shè)置 Hadoop 的環(huán)境變量

# vim ~/.bashrc

export HADOOP_HOME=/usr/local/hadoop

export HADOOP_INSTALL=$HADOOP_HOME

export HADOOP_MAPRED_HOME=$HADOOP_HOME

export HADOOP_COMMON_HOME=$HADOOP_HOME

export HADOOP_HDFS_HOME=$HADOOP_HOME

export YARN_HOME=$HADOOP_HOME

export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native

export PATH=$PATH:$HADOOP_HOME/sbin:$HADOOP_HOME/bin

執(zhí)行 Hadoop 的環(huán)境變量

source ~/.bashrc

?

進(jìn)入 hadoop 配置文件，修改配置文件

# cd /usr/local/hadoop/etc/hadoop

# vim core-site.xml

編輯 core-site.xml 文件

?# vim hdfs-site.xml

編輯 hdfs-site.xml 文件

?

?格式化

# /usr/local/hadoop/bin/hdfs namenode -format

通過(guò)命令，執(zhí)行 hadloop

/usr/local/hadoop/sbin/start-dfs.sh

連續(xù)輸入 root 用戶的密碼

通過(guò)命令，查看狀態(tài) 四個(gè)節(jié)點(diǎn)必須全

# jps

?

通過(guò) Web 界面訪問(wèn) hadloop，查看節(jié)點(diǎn)存活情況，能夠看到節(jié)點(diǎn)存活情況表示搭建成功 #ip 地址:50070

必須關(guān)閉防火墻 注意：如果無(wú)法訪問(wèn)請(qǐng)?jiān)購(gòu)牡谑阶鲆槐?，最后通過(guò) jps 查看，回復(fù)四個(gè)節(jié)點(diǎn)信息說(shuō)明無(wú)誤

?通過(guò)這個(gè)選項(xiàng)查看存活節(jié)點(diǎn)，配置成功

?

柚子快報(bào)邀請(qǐng)碼778899分享：hadoop DHFS偽分布式

http://yzkb.51969.com/

好文推薦