在Apache Hadoop官網(wǎng)可下載Hadoop生態(tài)部分核心組件,同時(shí)也可查閱Hadoop各版本說(shuō)明及操作指南以
及各版本Hadoop源碼,在下載時(shí)注意選擇鏡像站點(diǎn),推薦在清華站點(diǎn)或者阿里云站點(diǎn)進(jìn)行下載,在后續(xù)的其他核
心組件下載安裝時(shí)也是如此。
在前述的操作中,我們已經(jīng)完成了Hadoop的安裝,此時(shí)我們進(jìn)入到Hadoop文件中簡(jiǎn)單查看其內(nèi)部文件結(jié)構(gòu)
基本結(jié)構(gòu)如下
bin(binary)二進(jìn)制執(zhí)行文件目錄,是Hadoop最基本的
管理腳本和使用腳本所在目錄,是sbin文件
中腳本的基礎(chǔ)實(shí)現(xiàn),用戶可以使用其直接
管理和使用hadoopsbin Hadoop管理腳本所在目錄,主要包含hdfs、yarn
等各核心組件啟動(dòng)、關(guān)閉服務(wù)腳本etcHadoop配置文件所在目錄,Hadoop生態(tài)中
各組件都是通過(guò)修改配置文件來(lái)進(jìn)行不同
模式的運(yùn)行share Hadoop各模塊編譯后jar包所在目錄lib Hadoop對(duì)外的編程動(dòng)態(tài)庫(kù)和靜態(tài)庫(kù),與include中的
頭文件配合使用include 包含對(duì)外的編程頭文件libexec 各服務(wù)對(duì)應(yīng)的shell配置文件所在目錄
配置Hadoop環(huán)境變量
在命令行中輸入
在彈出的框體中輸入i進(jìn)入編輯模式,然后輸入下述內(nèi)容
vim ~/.profile
#Hadoop
export HADOOP_HOME=/usr/local/hadoop
export PATH=$PATH:$HADOOP_HOME/bin
export PATH=$PATH:$HADOOP_HOME/sbin
export HADOOP_MAPRED_HOME=$HADOOP_HOME
export HADOOP_COMMON_HOME=$HADOOP_HOME
export HADOOP_HDFS_HOME=$HADOOP_HOME
export YARN_HOME=$HADOOP_HOME
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native
export HADOOP_OPTS="-DJava.library.path=$HADOOP_HOME/lib"
export JAVA_LIBRARY_PATH=$HADOOP_HOME/lib/native:$JAVA_LIBRARY_PATH
按esc退出編輯模式,輸入:wq保存并退出
在命令行中輸入
使之生效。
注:在后續(xù)環(huán)境變量設(shè)置中,將不再反復(fù)贅述編輯器打開(kāi)關(guān)閉過(guò)程,只對(duì)需要更改的環(huán)境變量?jī)?nèi)容進(jìn)行說(shuō)
明。
檢驗(yàn)Hadoop是否安裝成功
在命令行中輸入
source ~/.profile
hadoop version








暫無(wú)數(shù)據(jù)