柚子快報邀請碼778899分享:大數(shù)據(jù) Hive組建安裝配置
柚子快報邀請碼778899分享:大數(shù)據(jù) Hive組建安裝配置
實(shí)驗(yàn)任務(wù)一:下載和解壓安裝文件
步驟一:基礎(chǔ)環(huán)境和安裝準(zhǔn)備
步驟二:解壓安裝文件
(1)使用 root 用戶,將 Hive 安裝包
/opt/software/apache-hive-2.0.0-bin.tar.gz 路解壓到/usr/local/src 路徑下。
?(2)將解壓后的 apache-hive-2.0.0-bin 文件夾更名為 hive;?
?(3)修改 hive 目錄歸屬用戶和用戶組為 hadoop ??
?實(shí)驗(yàn)任務(wù)二:設(shè)置 Hive 環(huán)境
步驟一:卸載 MariaDB 數(shù)據(jù)庫?
?(1)關(guān)閉 Linux 系統(tǒng)防火墻,并將防火墻設(shè)定為系統(tǒng)開機(jī)并不自動啟動。?
?# 關(guān)閉防火墻服務(wù) ?
?# 設(shè)置防火墻服務(wù)開機(jī)不啟動
?(2)卸載 Linux 系統(tǒng)自帶的 MariaDB。
?1)首先查看 Linux 系統(tǒng)中 MariaDB 的安裝情況。
?2)卸載 MariaDB 軟件包。
?步驟二:安裝 MySQL 數(shù)據(jù)庫
(1)按如下順序依次按照 MySQL 數(shù)據(jù)庫的 mysql common、mysql libs、mysql client 軟件包。
?(2)安裝 mysql server 軟件包。
?(3)修改 MySQL 數(shù)據(jù)庫配置,在/etc/my.cnf 文件中添加如表 6-1 所示的 MySQL 數(shù)據(jù) 庫配置項(xiàng)。 ?
將以下配置信息添加到/etc/my.cnf 文件 symbolic-links=0 配置信息的下方。
default-storage-engine=innodb
innodb_file_per_table
collation-server=utf8_general_ci
init-connect='SET NAMES utf8' character-set-server=utf8
?(4)啟動 MySQL 數(shù)據(jù)庫。
?(5)查詢 MySQL 數(shù)據(jù)庫狀態(tài)。mysqld 進(jìn)程狀態(tài)為 active (running),則表示 MySQL 數(shù) 據(jù)庫正常運(yùn)行。 如果 mysqld 進(jìn)程狀態(tài)為 failed,則表示 MySQL 數(shù)據(jù)庫啟動異常。此時需要排查 /etc/my.cnf 文件。
?(6)查詢 MySQL 數(shù)據(jù)庫默認(rèn)密碼。
MySQL 數(shù)據(jù)庫安裝后的默認(rèn)密碼保存在/var/log/mysqld.log 文件中,在該文件中以 password 關(guān)鍵字搜索默認(rèn)密碼。
?(7)MySQL 數(shù)據(jù)庫初始化。
(8)添加 root 用戶從本地和遠(yuǎn)程訪問 MySQL 數(shù)據(jù)庫表單的授權(quán)。
?步驟三:配置 Hive 組件
(1)設(shè)置 Hive 環(huán)境變量并使其生效
在文件末尾追加以下配置內(nèi)容 ?
?使環(huán)境變量配置生效
?(2)修改 Hive 組件配置文件。
切換到 hadoop 用戶執(zhí)行以下對 Hive 組件的配置操作。
將/usr/local/src/hive/conf 文件夾下 hive-default.xml.template 文件,更名為 hive-site.xml。
?(3)通過 vi 編輯器修改 hive-site.xml 文件實(shí)現(xiàn) Hive 連接 MySQL 數(shù)據(jù)庫,并設(shè)定 Hive 臨時文件存儲路徑。
?1)設(shè)置 MySQL 數(shù)據(jù)庫連接。
2)配置 MySQL 數(shù)據(jù)庫 root 的密碼。
?3)驗(yàn)證元數(shù)據(jù)存儲版本一致性。若默認(rèn) false,則不用修改。
?4)配置數(shù)據(jù)庫驅(qū)動。
5)配置數(shù)據(jù)庫用戶名 javax.jdo.option.ConnectionUserName 為 root。
6 ) 將 以 下 位 置 的 ${system:java.io.tmpdir}/${system:user.name} 替 換 為 “/usr/local/src/hive/tmp”目錄及其子目錄。 需要替換以下 4 處配置內(nèi)容:
?
?
?
?7)在 Hive 安裝目錄中創(chuàng)建臨時文件夾 tmp。
至此,Hive 組件安裝和配置完成。
步驟四:初始化 hive 元數(shù)據(jù)
1)將 MySQL 數(shù)據(jù)庫驅(qū)動(/opt/software/mysql-connector-java-5.1.46.jar)拷貝到 Hive 安裝目錄的 lib 下;
2)重新啟動 hadooop 即可
?
3)初始化數(shù)據(jù)庫
4)啟動 hive
柚子快報邀請碼778899分享:大數(shù)據(jù) Hive組建安裝配置
推薦鏈接
本文內(nèi)容根據(jù)網(wǎng)絡(luò)資料整理,出于傳遞更多信息之目的,不代表金鑰匙跨境贊同其觀點(diǎn)和立場。
轉(zhuǎn)載請注明,如有侵權(quán),聯(lián)系刪除。