ICode9

精准搜索请尝试: 精确搜索
首页 > 其他分享> 文章详细

CDH| Hive| Hue| Sqoop| Impala等组件安装部署

2020-04-20 23:58:41  阅读:399  来源: 互联网

标签:Hue CDH Sqoop so.16 usr libmysqlclient mysql lib64 root


 

 

一. 添加Hive服务

将 Hive 服务添加到 Cluster 1

配置hive元数据

测试通过后继续

自动启动Hive进程

修改Hive配置

/opt/cloudera/parcels/HADOOP_LZO-0.4.15-1.gplextras.p0.123/lib/hadoop/lib

 

更新Hive Metastore NameNode(先停止Hive)

 

 

 

 

二. Oozie安装

  添加Oozie服务,选择有MySQL的节点安装

 

 

 

选择集群节点

 

 

三. Hue

1. Hue概述

1)Hue来源

HUE=Hadoop User Experience(Hadoop用户体验),直白来说就一个开源的Apache Hadoop UI系统,由Cloudera Desktop演化而来,最后Cloudera公司将其贡献给Apache基金会的Hadoop社区,它是基于Python Web框架Django实现的。通过使用HUE我们可以在浏览器端的Web控制台上与Hadoop集群进行交互来分析处理数据。

2)Hue官网及使用者

官网网站:http://gethue.com/

2.   安装前的准备

1)在LoadBalancer节点安装mod_ssl

2)查看/usr/lib64/mysql下有没有libmysqlclient_r.so.16,如果没有,上传libmysqlclient_r.so.16到/usr/lib64/mysql,并软链接到/usr/lib64/

[root@hadoop101 lib]# yum -y install mod_ssl
已加载插件:fastestmirror, refresh-packagekit, security
设置安装进程
Loading mirror speeds from cached hostfile
 * base: mirrors.aliyun.com
 * extras: mirrors.huaweicloud.com
 * updates: mirrors.huaweicloud.com
解决依赖关系
--> 执行事务检查
---> Package mod_ssl.x86_64 1:2.2.15-69.el6.centos will be 安装
..........



[root@hadoop102 mysql]# ll
总用量 3108
lrwxrwxrwx. 1 root root      26 1月  15 2019 libmysqlclient_r.so.16 -> libmysqlclient_r.so.16.0.0
-rwxr-xr-x. 1 root root 1595432 5月  11 2016 libmysqlclient_r.so.16.0.0
lrwxrwxrwx. 1 root root      24 1月  15 2019 libmysqlclient.so.16 -> libmysqlclient.so.16.0.0
-rwxr-xr-x. 1 root root 1584904 5月  11 2016 libmysqlclient.so.16.0.0
[root@hadoop102 mysql]# scp /usr/lib64/mysql/libmysqlclient_r.so.16 root@hadoop101:/usr/lib64/mysql/
libmysqlclient_r.so.16 
[root@hadoop101 lib64]# ln -s /usr/lib64/mysql/libmysqlclient_r.so.16 /usr/lib64/libmysqlclient_r.so.16

 

 添加HUE服务

 

 

 

HUE页面

http://hadoop101:8888(未优化)或http://hadoop101:8889(优化)

第一次开启HUE会出现以下页面,此时输入的用户名和密码可以随意,之后登录页面以第一次输入的账号密码为依据。例如,用户名:admin 密码:admin

 

 

 

四. Sqoop安装

1)添加服务

选择Sqoop

 

目前选择sqoop1即可

2)选择节点

 

 安装在Hadoop101机器上:

数仓之即席查询数仓搭建

Impala安装

   添加服务

 

注意:最好将StateStore和CataLog Sever单独部署在同一节点上。

启动Impala

 

 

打开Hue

 

标签:Hue,CDH,Sqoop,so.16,usr,libmysqlclient,mysql,lib64,root
来源: https://www.cnblogs.com/shengyang17/p/12639670.html

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有