HUE是什么?
Hue是一个开源的Apache Hadoop UI系统,最早是由Cloudera Desktop演化而来,由Cloudera贡献给开源社区,它是基于Python Web框架Django实现的。 通过使用Hue我们可以在浏览器端的Web控制台上与Hadoop集群进行交互来分析处理数据,例如操作HDFS上的数据,运行MapReduce Job等等。
HUE的安装
HUE所需要的rpm包
yum install gcc g++ libxml2-devel libxslt-devel cyrus-sasl-devel cyrus-sasl-gssapi mysql-devel python-devel python-setuptools
sqlite-devel ant ibsasl2-dev libsasl2-modules-gssapi-mit libkrb5-dev libtidy-0.99-0 mvn openldap-dev libffi-devel
gmp-devel openldap-devel -y
解压源码包
[hadoop@hadoop001 ~]$ tar -zxvf hue-3.9.0-cdh5.7.0.tar.gz -C /home/hadoop/app/
编译
进入到解压的目录,开始编译
#编译的过程需要等几分钟
[hadoop@hadoop001 hue-3.9.0-cdh5.7.0]$ make apps
集成HDFS
# hdfs-site.xml
<property>
<name>dfs.webhdfs.enabled</name>
<value>true</value>
</property>
#core-site.xml
<property>
<name>hadoop.proxyuser.hue.hosts</name>
<value>*</value>
</property>
<property>
<name>hadoop.proxyuser.hue.groups</name>
<value>*</value>
</property>
<property>
<name>hadoop.proxyuser.hadoop.hosts</name>
<value>*</value>
</property>
<property>
<name>hadoop.proxyuser.hadoop.groups</name>
<value>*</value>
</property>
配置hue.ini
[hadoop@hadoop001 conf]$cd /home/hadoop/app/hue-3.9.0-cdh5.7.0/desktop/conf
[hadoop@hadoop001 conf]$ vi hue.ini
大约在20行
[desktop]
http_host=hadoop001
http_port=8888
server_user=hadoop
server_group=hadoop
default_user=hue
default_hdfs_superuser=hadoop
大约470行
[[database]]
engine=mysql
host=192.168.100.111
port=3306
user=root
password=123456
name=ruoze_d6
大约660行
[hadoop]
[[[default]]]
fs_defaultfs=hdfs://hadoop001:8020
webhdfs_url=http://hadoop001:50070/webhdfs/v1
hadoop_conf_dir=/home/hadoop/app/hadoop-2.6.0-cdh5.7.0/etc/hadoop
在780行,因为我的hive-site.xml文件中hive2是16666端口
[beeswax]
hive_server_host=hadoop001
#Port where HiveServer2 Thrift server runs on.
hive_server_port=16666
hive_conf_dir=/home/hadoop/app/hive-1.1.0-cdh5.7.0/conf
初始化
初始化数据库
需要输入用户名邮箱密码
[hadoop@hadoop001 bin]$ ./hue syncdb
[hadoop@hadoop001 bin]$ ./hue migrate
启动hue
[hadoop@hadoop001 bin]$ ./supervisor
Web Consloe访问
先启动hdfs ,再启动 hive2
http://hadoop001:8888
测试HDFS和Hive
官网HUE配置文档
HUE官网配置文档