欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

Docker安裝Presto連接Hive的詳細(xì)過(guò)程

 更新時(shí)間:2021年09月06日 11:00:21   作者:Leil_blogs  
這篇文章主要介紹了Docker安裝Presto連接Hive的詳細(xì)過(guò)程,本文給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下

1、簡(jiǎn)介

Presto 是一個(gè)開源分布式 SQL 查詢引擎,用于針對(duì)從千兆字節(jié)到 PB 級(jí)的各種規(guī)模的數(shù)據(jù)源運(yùn)行交互式分析查詢。Presto 允許查詢數(shù)據(jù)所在的位置,包括 Hive、Cassandra、關(guān)系數(shù)據(jù)庫(kù)甚至專有數(shù)據(jù)存儲(chǔ)。單個(gè) Presto 查詢可以組合來(lái)自多個(gè)來(lái)源的數(shù)據(jù),從而允許對(duì)整個(gè)組織進(jìn)行分析。

2、下載安裝

1)下載鏡像

docker pull starburstdata/presto

2)下載客戶端jar

因?yàn)閜ull下來(lái)的鏡像是server,是沒有presto-cli命令的,所以需要下載presto-cli-0.260.1-executable.jar,然后將下載好的jar包拉入Linux系統(tǒng)中。

下載完成后,run容器:

#端口號(hào)為8080,請(qǐng)自行修改,名字為presto
docker run -d -p 8080:8080  --name presto starburstdata/presto

將客戶端jar包拷貝到容器中的bin目錄下:

docker cp [客戶端jar包所在的linux路徑] [容器名]:/bin

進(jìn)入到hadoop配置文件目錄,將core-site.xml和hdfs-site.xml復(fù)制到容器中

cd ${HADOOP_HOME}/etc/hadoop
docker cp core-site.xml presto:/usr/lib/presto/etc/
docker cp core-site.xml presto:/usr/lib/presto/etc/

進(jìn)入容器(以下不標(biāo)注都是在容器中進(jìn)行的操作):

#以root用戶進(jìn)入容器,防止沒有權(quán)限操作文件
docker exec --user=root -it presto /bin/bash

將客戶端jar包改名并賦予可執(zhí)行權(quán)限:

cd bin
mv presto-cli-0.260.1-executable.jar presto-cli
chmod a+x presto-cli

3、配置文件

進(jìn)入配置文件目錄,創(chuàng)建hive配置文件:

cd /usr/lib/presto/etc/catalog
vi hive.properties

hive.properties:

#連接名,固定
connector.name=hive-hadoop2
#hive元數(shù)據(jù)uri,在hive-site.xml里能夠找到,請(qǐng)自行修改ip和端口
hive.metastore.uri=thrift://192.168.10.51:9083
#hive配置的資源 core-site.xml和hdfs-site.xml,請(qǐng)根據(jù)自己集群中的配置文件路徑進(jìn)行修改,中間用逗號(hào)隔開
hive.config.resources=/usr/lib/presto/etc/core-site.xml,/usr/lib/presto/etc/hdfs-site.xml

wq保存退出

重啟容器(在linux命令行下):

docker restart presto

4、測(cè)試連接

進(jìn)入容器:

#以root用戶進(jìn)入容器,防止沒有權(quán)限操作文件
docker exec --user=root -it presto /bin/bash
#進(jìn)入bin目錄
cd bin
#執(zhí)行命令行腳本并測(cè)試hive連接,連接到hive配置文件,數(shù)據(jù)庫(kù)是default
./presto-cli --server localhost:8080 --catalog hive --schema default
presto>show tables;

到此這篇關(guān)于Docker安裝Presto連接Hive的詳細(xì)過(guò)程的文章就介紹到這了,更多相關(guān)Docker安裝Presto內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!

相關(guān)文章

  • supervisor下的Dockerfile的多服務(wù)鏡像封裝操作

    supervisor下的Dockerfile的多服務(wù)鏡像封裝操作

    這篇文章主要介紹了supervisor下的Dockerfile的多服務(wù)鏡像封裝操作,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧
    2020-11-11
  • K8s集群重啟與恢復(fù)-Node節(jié)點(diǎn)啟停方式

    K8s集群重啟與恢復(fù)-Node節(jié)點(diǎn)啟停方式

    這篇文章主要介紹了K8s集群重啟與恢復(fù)-Node節(jié)點(diǎn)啟停方式,具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教
    2024-08-08
  • docker鏡像壓縮squash的實(shí)現(xiàn)

    docker鏡像壓縮squash的實(shí)現(xiàn)

    本文主要介紹了docker鏡像壓縮squash的實(shí)現(xiàn),文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧
    2023-07-07
  • 查看docker中運(yùn)行的JVM參數(shù)問(wèn)題及解決方法

    查看docker中運(yùn)行的JVM參數(shù)問(wèn)題及解決方法

    這篇文章主要介紹了查看docker中運(yùn)行的JVM參數(shù),方法一使用的是jcmd命令,方法二是jinfo命令,本文給大家介紹的非常詳細(xì),感興趣的朋友一起看看吧
    2022-04-04
  • Docker之Dockerfile使用方法詳解

    Docker之Dockerfile使用方法詳解

    當(dāng)使用Docker構(gòu)建容器化應(yīng)用程序時(shí),Dockerfile是一個(gè)用于定義容器鏡像的文本文件,Dockerfile 的編寫是構(gòu)建容器的基礎(chǔ),它允許您定義容器的構(gòu)建步驟、環(huán)境和配置,所以本文就給大家講講Docker的Dockerfile使用方法,需要的朋友可以參考下
    2023-09-09
  • Docker實(shí)踐之python應(yīng)用容器化

    Docker實(shí)踐之python應(yīng)用容器化

    這篇文章主要介紹了Docker實(shí)踐之python應(yīng)用容器化,小編覺得挺不錯(cuò)的,現(xiàn)在分享給大家,也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧
    2019-06-06
  • Docker如何保存對(duì)容器的修改問(wèn)題

    Docker如何保存對(duì)容器的修改問(wèn)題

    這篇文章主要介紹了Docker如何保存對(duì)容器的修改問(wèn)題,具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教
    2023-08-08
  • docker文件存放路徑, 獲取容器啟動(dòng)命令操作

    docker文件存放路徑, 獲取容器啟動(dòng)命令操作

    這篇文章主要介紹了docker文件存放路徑, 獲取容器啟動(dòng)命令操作,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧
    2020-11-11
  • 詳解docker下的Mysql鏡像的使用方法

    詳解docker下的Mysql鏡像的使用方法

    本篇文章主要介紹了詳解docker下的Mysql鏡像的使用方法,小編覺得挺不錯(cuò)的,現(xiàn)在分享給大家,也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧
    2017-06-06
  • MacBookPro下docker的安裝與使用教程

    MacBookPro下docker的安裝與使用教程

    Windows與Linux下關(guān)于docker的安裝使用方法有很多,今天小編這里給大家分享的是MacOS下docker的安裝與簡(jiǎn)單使用案例,非常簡(jiǎn)單,給有需要的小伙伴參考下
    2017-03-03

最新評(píng)論