配置hive元數據到Mysql中的全過程記錄
更新時間:2020年10月04日 10:09:05 作者:孫晨c
這篇文章主要給的大家介紹了關于配置hive元數據到Mysql中的全過程,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友們下面隨著小編來一起學習學習吧
- 在hive的安裝目錄下,進入conf目錄,創(chuàng)建一個hive-site.xml文件
- 根據官方文檔配置參數,拷貝數據到hive-site.xml文件中
https://cwiki.apache.org/confluence/display/Hive/AdminManual+MetastoreAdmin
注意:先創(chuàng)建一個metastore數據庫,字符集要用latin1
將mysql驅動復制到hive的lib目錄里。(這有關上一篇安裝MySQL的內容)
解壓驅動包
將mysql驅動復制到hive的lib目錄里
啟動hive(別忘了先啟動hdfs和yarn~~)
start-dfs.sh start-yarn.sh hive
創(chuàng)建一張表,試試看元數據能否保存到MySQL里
查看一下metastore庫
TBLS表
COLUMNS_V2表
DBS表
從上圖中,可得知
元數據的結構
- 表的信息都存儲在tbls表中,通過db_id和dbs表中的庫進行外鍵約束!
- 庫的信息都存儲在dbs表中!
- 字段信息存在在column_v2表中,通過CD_ID和表的主鍵進行外鍵約束!
總結
到此這篇關于配置hive元數據到Mysql中的全過程的文章就介紹到這了,更多相關配置hive元數據到Mysql內容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關文章希望大家以后多多支持腳本之家!
您可能感興趣的文章:
相關文章
Windows Server2019安裝MySQL5.7.25的方法
這篇文章主要介紹了Windows Server2019安裝MySQL5.7.25,本文給大家介紹的非常詳細,對大家的學習或工作具有一定的參考借鑒價值,需要的朋友可以參考下2022-09-09MySQL?SQL性能分析之慢查詢日志、explain使用詳解
這篇文章主要介紹了MySQL?SQL性能分析?慢查詢日志、explain使用,本文給大家介紹的非常詳細,對大家的學習或工作具有一定的參考借鑒價值,需要的朋友可以參考下2023-04-04