签到成功

知道了

CNDBA社区CNDBA社区

kettle使用之hive2连接之前的相关配置

2019-06-10 18:30 5661 0 原创 大数据
作者: xuyi

该文章只针对MAC版,kettle版本对应的是7.1,CDH为5.11.2


连接 hive2 三部曲


  1. 启动hiveServer2
  2. 修改plugin.properties及添加覆盖xml文件
  3. 添加hive对应的jar包

1.cdh安装完后hiveServer2可以直接在UI界面启动.

(可以控制台shell命令启动)http://www.cndba.cn/xuyi/article/3424http://www.cndba.cn/xuyi/article/3424


2.修改plugin.properties及添加覆盖xml文件

2.1 修改plugin.properties文件

plugin.properties文件地址在
kettle⁩/⁨data-integration⁩/plugins⁩/pentaho-big-data-plugin⁩目录下

http://www.cndba.cn/xuyi/article/3424

plugin.properties需要修改的内容是(注意这里只针对CDH):
active.hadoop.configuration=cdh510http://www.cndba.cn/xuyi/article/3424

有同学可能问为什么是cdh510?我们需要去
kettle⁩/⁨data-integration⁩/plugins⁩/pentaho-big-data-plugin⁩/hadoop-configurations
中查看

修改完plugin.properties文件保存.http://www.cndba.cn/xuyi/article/3424

http://www.cndba.cn/xuyi/article/3424

2.2 添加覆盖xml文件

然后我们进入图例的cdh510目录中,首先需要将xml文件替换成CDH集群的xml文件

替换完之后图示:

如果xml文件不全,需要手动去集群下载.这里就不赘述了.


添加hive对应的jar包

在cdh510的lib下添加如下被蓝色框选中的jar包:

同样这些jar最好再在⁨kettle⁩/data-integration⁩/lib下再添加一份,并且
kettle⁩/data-integration⁩/lib还需要添加mysql的驱动(红色框选中)
http://www.cndba.cn/xuyi/article/3424


可参照如下简书中的步骤操作,但是相应版本有所不同:

http://www.cndba.cn/xuyi/article/3424
http://www.cndba.cn/xuyi/article/3424

https://www.jianshu.com/p/ec45c21a977f

http://www.cndba.cn/xuyi/article/3424

版权声明:本文为博主原创文章,未经博主允许不得转载。

大数据ETL工具

用户评论
* 以下用户言论只代表其个人观点,不代表CNDBA社区的观点或立场
xuyi

xuyi

关注
  • 4
    原创
  • 0
    翻译
  • 0
    转载
  • 0
    评论
  • 访问:19365次
  • 积分:18
  • 等级:注册会员
  • 排名:第81名
精华文章
    最新问题
    查看更多+
    热门文章
      热门用户
      推荐用户
        Copyright © 2016 All Rights Reserved. Powered by CNDBA · 皖ICP备2022006297号-1·

        QQ交流群

        注册联系QQ