首頁技術(shù)文章正文

安裝Hive的步驟有哪些?安裝過程詳解

更新時間:2021-03-04 來源:黑馬程序員 瀏覽量:

1577370495235_學IT就到黑馬程序員.gif


本地和遠程模式安裝配置方式大致相同,本質(zhì)上是將Hive默認的元數(shù)據(jù)存儲介質(zhì)由自帶的Derby數(shù)據(jù)庫替換為MySQL數(shù)據(jù)庫,這樣無論在任何目錄下以任何方式啟動Hive,只要連接的是同一臺Hive服務,那么所有節(jié)點訪問的元數(shù)據(jù)信息是一致的,從而實現(xiàn)元數(shù)據(jù)的共享。下面就以本地模式為例,講解安裝過程。

本地模式的Hive安裝主要包括兩個步驟:首先安裝MySQL服務,再安裝Hive。具體步驟如下:


1.安裝MySQL服務

MySQL安裝方式有許多種,可以直接解壓安裝包進行相關(guān)配置,也可以選擇在線安裝,本節(jié)選用在線安裝MySQL方式。在線安裝MySQL的具體指令和說明如下:

// 下載安裝MySQL

$ yum install mysql mysql-server mysql-devel// 啟動MySQL服務

$ /etc/init.d/mysqld start// MySQL連接并登錄MySQL服務

$ mysql

上述指令中,首先通過“yum install”命令下載并安裝MySQL程序,并且啟動MySQL服務,然后就可以使用MySQL命令連接到MySQL客戶端。

接下來,進入MySQL客戶端后,分別對MySQL數(shù)據(jù)庫密碼進行修改(可選),并設置允許遠程登錄權(quán)限,具體指令如下:

// 修改登錄MySQL用戶名及密碼

mysql> USE mysql; 

mysql> UPDATE user SET Password=PASSWORD('123456') WHERE user='root'; 

// 設置允許遠程登錄

mysql> GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY '123456' WITH GRANT OPTION;

// 強制寫入

mysql> FLUSH PRIVILEGES;


2.Hive的配置

(1)修改hive-env.sh配置文件,配置Hadoop環(huán)境變量

進入Hive安裝包下的conf文件夾,將hive-env.sh.template文件進行拷貝并重命名為hive-env.sh,具體指令如下:

$ cd /export/servers/apache-hive-1.2.1-bin/conf

$ cp hive-env.sh.template hive-env.sh

然后修改hive-env.sh配置文件,添加Hadoop環(huán)境變量,具體內(nèi)容如下:

export HADOOP_HOME=/export/servers/hadoop-2.7.4

上述操作是設置Hadoop環(huán)境變量,作用是無論系統(tǒng)是否配置Hadoop環(huán)境變量,在Hive執(zhí)行時,一定能夠通過hive-env.sh配置文件去加載Hadoop環(huán)境變量,由于在部署Hadoop集群時已經(jīng)配置了全局Hadoop環(huán)境變量,因此可以不設置該參數(shù)。

1614852035781_Hive的本地安裝和遠程安裝.jpg


(2)添加hive-site.xml配置文件,配置MySQL相關(guān)信息

由于Hive安裝包conf目錄下,沒有提供hive-site.xml文件,這里需要創(chuàng)建并編輯一個hive-site.xml配置文件,具體內(nèi)容如下所示:

<configuration>

  <property>

    <name>javax.jdo.option.ConnectionURL</name>

    <value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true</value>

    <description>Mysql連接協(xié)議</description>

  </property>

<property>

    <name>javax.jdo.option.ConnectionDriverName</name>

    <value>com.mysql.jdbc.Driver</value>

    <description>JDBC連接驅(qū)動</description>

  </property>

  <property>

    <name>javax.jdo.option.ConnectionUserName</name>

    <value>root</value>

    <description>用戶名</description>

  </property>

  <property>

    <name>javax.jdo.option.ConnectionPassword</name>

    <value>123456</value>

    <description>密碼</description>

  </property>

</configuration>

完成配置后,Hive就會把默認使用Derby數(shù)據(jù)庫方式所覆蓋。這里需要注意的是,由于使用了MySQL數(shù)據(jù)庫,那么就需要上傳MySQL連接驅(qū)動的Jar包到Hive安裝包的lib文件夾下,本教材使用mysql-connector-java-5.1.32.jar,使用rz命令上傳即可。至此就完成了本地模式的安裝。

如果使用遠程模式的安裝方式,只需要將hive-site.xml配置文件中的localhost修改為具有MySQL服務的節(jié)點IP即可,這樣無論用戶通過什么路徑下啟動Hive客戶端,都可以訪問相同的元數(shù)據(jù)信息。





猜你喜歡:

Redis、傳統(tǒng)數(shù)據(jù)庫、HBase和Hive幾種數(shù)據(jù)存儲的區(qū)別

RDD如何分區(qū),各種模式下的分區(qū)數(shù)目是怎樣的?

什么是數(shù)據(jù)倉庫?Hive數(shù)據(jù)倉庫特點簡介

黑馬程序員大數(shù)據(jù)培訓課程

分享到:
在線咨詢 我要報名
和我們在線交談!