配置hive元數(shù)據(jù)到Mysql中的全過程記錄
- 在hive的安裝目錄下,進(jìn)入conf目錄,創(chuàng)建一個hive-site.xml文件
- 根據(jù)官方文檔配置參數(shù),拷貝數(shù)據(jù)到hive-site.xml文件中
https://cwiki.apache.org/confluence/display/Hive/AdminManual+MetastoreAdmin
注意:先創(chuàng)建一個metastore數(shù)據(jù)庫,字符集要用latin1
將mysql驅(qū)動復(fù)制到hive的lib目錄里。(這有關(guān)上一篇安裝MySQL的內(nèi)容)
解壓驅(qū)動包
將mysql驅(qū)動復(fù)制到hive的lib目錄里
啟動hive(別忘了先啟動hdfs和yarn~~)
start-dfs.sh start-yarn.sh hive
創(chuàng)建一張表,試試看元數(shù)據(jù)能否保存到MySQL里
查看一下metastore庫
TBLS表
COLUMNS_V2表
DBS表
從上圖中,可得知
元數(shù)據(jù)的結(jié)構(gòu)
- 表的信息都存儲在tbls表中,通過db_id和dbs表中的庫進(jìn)行外鍵約束!
- 庫的信息都存儲在dbs表中!
- 字段信息存在在column_v2表中,通過CD_ID和表的主鍵進(jìn)行外鍵約束!
總結(jié)
到此這篇關(guān)于配置hive元數(shù)據(jù)到Mysql中的全過程的文章就介紹到這了,更多相關(guān)配置hive元數(shù)據(jù)到Mysql內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
Linux環(huán)境下安裝MySQL數(shù)據(jù)庫
這篇文章介紹了Linux環(huán)境下安裝MySQL數(shù)據(jù)庫的方法,對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2022-04-04Windows Server2019安裝MySQL5.7.25的方法
這篇文章主要介紹了Windows Server2019安裝MySQL5.7.25,本文給大家介紹的非常詳細(xì),對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值,需要的朋友可以參考下2022-09-09MySQL數(shù)據(jù)表合并去重的簡單實(shí)現(xiàn)方法
這篇文章主要給大家介紹了關(guān)于MySQL數(shù)據(jù)表合并去重的簡單實(shí)現(xiàn)方法,文中通過示例代碼介紹的非常詳細(xì),對大家學(xué)習(xí)或者使用MySQL具有一定的參考學(xué)習(xí)價值,需要的朋友們下面來一起學(xué)習(xí)學(xué)習(xí)吧2019-05-05MySQL數(shù)據(jù)庫設(shè)置遠(yuǎn)程訪問權(quán)限方法小結(jié)
很多情況下我們需要遠(yuǎn)程連接mysql數(shù)據(jù)庫,那么就可以參考下面的權(quán)限設(shè)置2013-10-10MySQL?SQL性能分析之慢查詢?nèi)罩?、explain使用詳解
這篇文章主要介紹了MySQL?SQL性能分析?慢查詢?nèi)罩尽xplain使用,本文給大家介紹的非常詳細(xì),對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值,需要的朋友可以參考下2023-04-04