HUE

CDH版本的HUE编译安装

Posted by JustDoDT on April 13, 2018

HUE是什么?

Hue是一个开源的Apache Hadoop UI系统,最早是由Cloudera Desktop演化而来,由Cloudera贡献给开源社区,它是基于Python Web框架Django实现的。 通过使用Hue我们可以在浏览器端的Web控制台上与Hadoop集群进行交互来分析处理数据,例如操作HDFS上的数据,运行MapReduce Job等等。

HUE的安装

HUE所需要的rpm包

yum install gcc g++ libxml2-devel libxslt-devel cyrus-sasl-devel cyrus-sasl-gssapi mysql-devel python-devel python-setuptools 
sqlite-devel ant ibsasl2-dev libsasl2-modules-gssapi-mit libkrb5-dev libtidy-0.99-0 mvn openldap-dev libffi-devel 
gmp-devel openldap-devel -y 

解压源码包

[hadoop@hadoop001 ~]$ tar -zxvf hue-3.9.0-cdh5.7.0.tar.gz -C /home/hadoop/app/

编译

进入到解压的目录,开始编译

#编译的过程需要等几分钟
[hadoop@hadoop001 hue-3.9.0-cdh5.7.0]$ make apps

集成HDFS

# hdfs-site.xml
<property>
	<name>dfs.webhdfs.enabled</name>
	<value>true</value>
</property>

#core-site.xml
<property>
<name>hadoop.proxyuser.hue.hosts</name>
<value>*</value>
</property>

<property>
   <name>hadoop.proxyuser.hue.groups</name>
   <value>*</value>
</property>

<property>
   <name>hadoop.proxyuser.hadoop.hosts</name> 
   <value>*</value>
</property>
          
<property>
   <name>hadoop.proxyuser.hadoop.groups</name>
   <value>*</value>
</property>

配置hue.ini

[hadoop@hadoop001 conf]$cd  /home/hadoop/app/hue-3.9.0-cdh5.7.0/desktop/conf
[hadoop@hadoop001 conf]$ vi hue.ini

大约在20行
[desktop]
  http_host=hadoop001
  http_port=8888
  server_user=hadoop
  server_group=hadoop
  default_user=hue
  default_hdfs_superuser=hadoop
  
大约470行
[[database]]
    engine=mysql
    host=192.168.100.111
    port=3306
    user=root
    password=123456
    name=ruoze_d6
    
 大约660行   
 [hadoop]
        [[[default]]]
         fs_defaultfs=hdfs://hadoop001:8020
     webhdfs_url=http://hadoop001:50070/webhdfs/v1
      hadoop_conf_dir=/home/hadoop/app/hadoop-2.6.0-cdh5.7.0/etc/hadoop
      
在780行,因为我的hive-site.xml文件中hive2是16666端口
[beeswax]
      hive_server_host=hadoop001
 		#Port where HiveServer2 Thrift server runs on.
      hive_server_port=16666
      hive_conf_dir=/home/hadoop/app/hive-1.1.0-cdh5.7.0/conf

初始化

初始化数据库
需要输入用户名邮箱密码
[hadoop@hadoop001 bin]$ ./hue syncdb 
  
[hadoop@hadoop001 bin]$ ./hue migrate
启动hue
[hadoop@hadoop001 bin]$ ./supervisor

Web Consloe访问

先启动hdfs ,再启动 hive2
http://hadoop001:8888

测试HDFS和Hive

HUE测试HDFS

HUE测试Hive

官网HUE配置文档
HUE官网配置文档