签到成功

知道了

CNDBA社区CNDBA社区

Hadoop Hue 概述

2019-05-07 15:10 1648 0 转载 Hadoop
作者: Dave

1. HUE 概念

  HUE(Hadoop User Experience)是一个开源的Apache Hadoop UI系统,由Cloudera Desktop演化而来,最后Cloudera公司将其贡献给Apache基金会的Hadoop社区,它是基于Python Web框架Django实现的。
  通过使用Hue我们可以在浏览器端的Web控制台上与Hadoop集群进行交互来分析处理数据,例如操作HDFS上的数据,运行MapReduce Job,执行Hive的SQL语句,浏览HBase数据库等等。

https://www.cndba.cn/dave/article/3389
https://www.cndba.cn/dave/article/3389

HUE链接

Site: http://gethue.com/
Github: https://github.com/cloudera/hue
Reviews: https://review.cloudera.org

https://www.cndba.cn/dave/article/3389
https://www.cndba.cn/dave/article/3389

2. 核心功能

  1. SQL编辑器,支持Hive, Impala, MySQL, Oracle, PostgreSQL, SparkSQL, Solr SQL, Phoenix…
  2. 搜索引擎Solr的各种图表
  3. Spark和Hadoop的友好界面支持
  4. 支持调度系统Apache Oozie,可进行workflow的编辑、查看

 HUE提供的这些功能相比Hadoop生态各组件提供的界面更加友好,但是一些需要debug的场景可能还是需要使用原生系统才能更加深入的找到错误的原因。https://www.cndba.cn/dave/article/3389

https://www.cndba.cn/dave/article/3389

 Hue在数据库方面,默认使用的是SQLite数据库来管理自身的数据,包括用户认证和授权,在CDH安装过程Hue时,可以自定义为MySQL数据库、Postgresql数据库、以及Oracle数据库。

https://www.cndba.cn/dave/article/3389
https://www.cndba.cn/dave/article/3389
https://www.cndba.cn/dave/article/3389

HUE主要功能列表:https://www.cndba.cn/dave/article/3389

  1. 对HDFS的访问,通过浏览器来查阅HDFS的数据。
  2. Hive编辑器:可以编写HQL和运行HQL脚本,以及查看运行结果等相关Hive功能。
  3. 提供Solr搜索应用,并对应相应的可视化数据视图以及DashBoard。
  4. 提供Impala的应用进行数据交互查询。
  5. 最新的版本集成了Spark编辑器和DashBoard
  6. 支持Pig编辑器,并能够运行编写的脚本任务。
  7. Oozie调度器,可以通过DashBoard来提交和监控Workflow、Coordinator以及Bundle。
  8. 支持HBase对数据的查询修改以及可视化。
  9. 支持对Metastore的浏览,可以访问Hive的元数据以及对应的HCatalog。
  10. 另外,还有对Job的支持,Sqoop,ZooKeeper以及DB(MySQL,SQLite,Oracle等)的支持。
用户评论
* 以下用户言论只代表其个人观点,不代表CNDBA社区的观点或立场
Dave

Dave

关注

人的一生应该是这样度过的:当他回首往事的时候,他不会因为虚度年华而悔恨,也不会因为碌碌无为而羞耻;这样,在临死的时候,他就能够说:“我的整个生命和全部精力,都已经献给世界上最壮丽的事业....."

  • 1902
    原创
  • 2
    翻译
  • 456
    转载
  • 131
    评论
  • 访问:3642159次
  • 积分:3137
  • 等级:核心会员
  • 排名:第1名
精华文章
    最新问题
    查看更多+
    热门文章
      热门用户
      推荐用户
        Copyright © 2016 All Rights Reserved. Powered by ZhiXinTech · 皖ICP备19020168号·

        QQ交流群