91超碰碰碰碰久久久久久综合_超碰av人澡人澡人澡人澡人掠_国产黄大片在线观看画质优化_txt小说免费全本

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

如何進行hue安裝以及hive hdfs oozie集成

發布時間:2021-10-19 17:28:51 來源:億速云 閱讀:156 作者:柒染 欄目:大數據

如何進行hue安裝以及hive hdfs oozie集成,相信很多沒有經驗的人對此束手無策,為此本文總結了問題出現的原因和解決方法,通過這篇文章希望你能解決這個問題。

[toc]

環境需求

  • jdk


  • maven


  • git


  • 第三方依賴 yum install -y gcc-c++ libxml2-devel.x86_64 libxslt-devel.x86_64 python-devel openldap-devel asciidoc cyrus-sasl-gssapi openssl-devel mysql-devel sqlite-devel gmp-devel libffi-devel npm 還有缺失什么可自行安裝


創建hue用戶和用戶組

groupadd hue

useradd -g hue hue

切換用戶并進入hue根目錄

su hue

cd ~

從git上拉取hue源碼

git clone https://github.com/cloudera/hue.git

進入hue-master目錄并編譯

cd hue-master

make apps 需要等待較長時間,若中間還缺少依賴可自行安裝

修改hue配置文件

vi /home/hue/hue-master/desktop/conf/pseudo-distributed.ini

時區

[desktop]

time_zone=Asia/Shanghai

用戶角色

[desktop]

server_user=hue

server_group=hue

default_user=hue

hdfs配置

[hadoop]

[[hdfs_clusters]]

fs_defaultfs=hdfs://集群名稱

webhdfs_url=http://hdfsMaster1:14000/webhdfs/v1

yarn配置

[hadoop]

[[yarn_clusters]]

[[[default]]]

resourcemanager_host=resourcemanager

resourcemanager_api_url=http://resourcemanager:8088

submit_to=True

proxy_api_url=http://172.19.131.104:8088

history_server_api_url=http://172.19.131.104:19888

database配置

(hue數據庫先創建好并授予權限給hue用戶) [database]

engine=mysql

host=mysqlhost

port=3306

user=hue

password=123456

name=hue

oozie配置(已默認可不配)

[oozie]

remote_data_dir=/user/hue/oozie/workspaces

enable_cron_scheduling=true

enable_document_action=true

liboozie配置

[liboozie]

oozie_url=http://master1:11000/oozie

beeswax配置(hive)

[beeswax]

hive_server_host=172.19.131.107

hive_server_port=10000

數據庫初始化

/home/hue/hue-master/build/env/bin/hue syncdb

/home/hue/hue-master/build/env/bin/hue migrate

運行

/home/hue/hue-master/build/env/bin/supervisor

問題解決

若hdfs路徑無法訪問

在hadoop的core-site配置文件下配置 hadoop.proxyuser.hue.groups=*

hadoop.proxyuser.hue.hosts=*

若hive數據庫無法訪問

可以在權限管理那里(本人用的是ranger)進行hive的數據庫授權

若oozie提交任務執行失敗

可查看MapReduce的日志,可能是當前用戶無法提交任務配置信息到yarn下的目錄

看完上述內容,你們掌握如何進行hue安裝以及hive hdfs oozie集成的方法了嗎?如果還想學到更多技能或想了解更多相關內容,歡迎關注億速云行業資訊頻道,感謝各位的閱讀!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

hue
AI

边坝县| 土默特右旗| 柞水县| 铜陵市| 平乐县| 大石桥市| 邻水| 内乡县| 荥阳市| 烟台市| 壤塘县| 泸定县| 潮州市| 五华县| 乌兰察布市| 徐水县| 清镇市| 沂源县| 图们市| 西华县| 句容市| 峨山| 云安县| 城步| 南安市| 昭平县| 文山县| 太保市| 邳州市| 隆昌县| 双江| 新竹县| 霍林郭勒市| 五华县| 渭源县| 柞水县| 庆城县| 京山县| 南汇区| 离岛区| 田阳县|