hive默認(rèn)的元數(shù)據(jù)庫為derby,除了derby外,hive也可以設(shè)置元數(shù)據(jù)庫為mysql
系統(tǒng)環(huán)境
操作平臺macOS X 10.13.2 64位
hadoop版本3.1.2
hive版本3.1.1
mysql版本5.6.30
mysql所在平臺centOS 6.5
jdk版本1.8.0
jdbc版本mysql-connector-java-8.0.16.jar
軟件安裝
hadoop與hive采用 brewhome安裝
brew install hadoopbrew install hive
mysql很早前通過源碼編譯安裝的,網(wǎng)上有綠色版可以直接下載使用.
jdk傻瓜式安裝過程.
環(huán)境變量配置
# java configexport MAVEN_HOME=/usr/local/mvn/export JAVA_HOME=/Library/Java/JavaVirtualMachines/jdk1.8.0_151.jdk/Contents/Homeexport CLASSPATH=$JAVA_HOME/libexport PATH=$PATH:$JAVA_HOME/bin# hadoop configexport HADOOP_HOME=/usr/local/Cellar/hadoop/3.1.2/libexecexport HADOOP_ROOT_LOGGER=ALL,Consoleexport HADOOP_COMMON_HOME=$HADOOP_HOMEexport PATH=$PATH:HADOOP_HOME/bin# hive configexport HIVE_HOME=/usr/local/Cellar/hive/3.1.1/libexecexport PATH=$PATH:$HIVE_HOME/bin
配置
創(chuàng)建一個(gè)hive用的數(shù)據(jù)庫與數(shù)據(jù)庫賬號(可以直接用root),如果是遠(yuǎn)程數(shù)據(jù)庫的話,需要修改mysql.user表,修改Host字段為hive機(jī)器所在ip,簡單點(diǎn)直接改為*即可
下載jdbc包,放置到$HIVE_HOME/lib下
配置hive,相關(guān)配置點(diǎn)在后端
初始化數(shù)據(jù)庫,啟動hive服務(wù)
創(chuàng)建hive_sit.xml
cd $HIVE_HOME/confcp hive-default.xml.template hive_site.xmlvim hive_sit.xml
輸入如下結(jié)構(gòu),具體信息請自行修改
<?xml version="1.0" encoding="UTF-8" standalone="no"?><?xml-stylesheet type="text/xsl" href="configuration.xsl"?><configuration> <property> <name>javax.jdo.option.ConnectionURL</name> <value>jdbc:mysql://數(shù)據(jù)庫:端口/數(shù)據(jù)庫名稱</value> </property> <property> <name>javax.jdo.option.ConnectionDriverName</name> <value>com.mysql.cj.jdbc.Driver</value> </property> <property> <name>javax.jdo.option.ConnectionUserName</name> <value>用戶名</value> </property> <property> <name>javax.jdo.option.ConnectionPassword</name> <value>密碼</value> </property></configuration>
修改hive_env.sh,設(shè)置HADOOP_HOME,HIVE_CONF_DIR,HIVE_AUX_JARS_PATH三項(xiàng)
HADOOP_HOME=/usr/local/Cellar/hadoop/3.1.2/libexecexport HIVE_CONF_DIR=/usr/local/Cellar/hive/3.1.1/libexec/confexport HIVE_AUX_JARS_PATH=/usr/local/Cellar/hive/3.1.1/libexec/lib
初始化hive的元數(shù)據(jù)庫
schematool -dbType mysql -initSchema
初始化后數(shù)據(jù)庫中會有如下表:
屏幕快照 2019-05-10 下午3.27.29.png
啟動hive
hive --service metastore &
測試,輸入hive并回撤進(jìn)入hive命令行狀態(tài)
hive> show databases;OKdefaultTime taken: 0.123 seconds, Fetched: 1 row(s)
如果返回以上結(jié)果,表示配置完畢
