配置hive元資料到Mysql中的全過程記錄
阿新 • • 發佈:2020-10-14
- 在hive的安裝目錄下,進入conf目錄,建立一個hive-site.xml檔案
- 根據官方文件配置引數,拷貝資料到hive-site.xml檔案中
https://cwiki.apache.org/confluence/display/Hive/AdminManual+MetastoreAdmin
注意:先建立一個metastore資料庫,字符集要用latin1
將mysql驅動複製到hive的lib目錄裡。(這有關上一篇安裝MySQL的內容)
解壓驅動包
將mysql驅動複製到hive的lib目錄裡
啟動hive(別忘了先啟動hdfs和yarn~~)
start-dfs.sh start-yarn.sh hive
建立一張表,試試看元資料能否儲存到MySQL裡
檢視一下metastore庫
TBLS表
COLUMNS_V2表
DBS表
從上圖中,可得知
元資料的結構
- 表的資訊都儲存在tbls表中,通過db_id和dbs表中的庫進行外來鍵約束!
- 庫的資訊都儲存在dbs表中!
- 欄位資訊存在在column_v2表中,通過CD_ID和表的主鍵進行外來鍵約束!
總結
到此這篇關於配置hive元資料到Mysql中的全過程的文章就介紹到這了,更多相關配置hive元資料到Mysql內容請搜尋我們以前的文章或繼續瀏覽下面的相關文章希望大家以後多多支援我們!