kylin2.1.0+cdh5.10.1+安装部署+官方测试例子详细教程_a920259310的博客-CSDN博客


本站和网页 https://blog.csdn.net/a920259310/article/details/77771917 的作者无关,不对其内容负责。快照谨为网络故障时之索引,不代表被搜索网站的即时页面。

kylin2.1.0+cdh5.10.1+安装部署+官方测试例子详细教程_a920259310的博客-CSDN博客
kylin2.1.0+cdh5.10.1+安装部署+官方测试例子详细教程
a920259310
于 2017-09-01 13:43:45 发布
9337
收藏
分类专栏:
kylin
文章标签:
kylin安装
kylin2.1.0
kylin部署
kylin测试
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/a920259310/article/details/77771917
版权
kylin
专栏收录该内容
1 篇文章
0 订阅
订阅专栏
CDH环境下kylin的安装教程
1.软件版本介绍:  
cdh5.10.1
Kylin: 2.1.0
2.环境检查
   环境中需要启动的角色:
Hive Metastore Server
yarn的JobHistory Server
3.正式安装
3.1 kylin2.1.0下载软件
http://mirrors.hust.edu.cn/apache/kylin/apache-kylin-2.1.0/apache-kylin-2.1.0-bin-cdh57.tar.gz
3.2 正式安装
   1.移动软件包到/usr/local/apps目录下
mkdir /usr/local/apps
cd /usr/local/apps
mv  ~/apache-kylin-2.1.0-bin-cdh57.tar.gz ./
   2.解压
[root@cdh01 apps]# tar -zxvf apache-kylin-2.1.0-bin-cdh57.tar.gz
   
   3.建立软连接
     [root@cdh01 apps]# ln -s apache-kylin-2.1.0-bin-cdh57 kylin
   4.添加环境变量到当前用户的bashrc下:  命令:  vi  ~/.bashrc
export BASE_PATH=/opt/cloudera/parcels/CDH/lib
#added by hbase
      export HBASE_HOME=$BASE_PATH/hbase
export PATH=$HBASE_HOME/bin:$PATH
#added by HCat
export HCAT_HOME=$BASE_PATH/hive-hcatalog
#added by kylin
export KYLIN_HOME=/usr/local/apps/kylin
#added by java
export JAVA_HOME=/usr/java/latest
5.生效环境配置
[root@cdh01 latest]# source ~/.bashrc
6.修改kylin.properties配置文件
[root@cdh01 conf]# pwd
/usr/local/apps/kylin/conf
[root@cdh01 conf]# vi kylin.properties
#修改
kylin.server.cluster-servers=192.168.1.201:7070
#添加配置
kylin.job.jar=/usr/local/apps/kylin/lib/kylin-job-2.1.0.jar
kylin.coprocessor.local.jar=/usr/local/apps/kylin/lib/kylin-coprocessor-2.1.0.jar
kylin.job.yarn.app.rest.check.status.url=http://192.168.1.202:8088/ws/v1/cluster/apps/${job_id}?anonymous=true
7.检查
       [root@cdh01 bin]# cd /usr/local/apps/kylin/bin
执行下面检查命令  会创建kylin目录在hdfs上
       [root@cdh01 bin]# ./check-env.sh
Retrieving hadoop conf dir...
KYLIN_HOME is set to /usr/local/apps/kylin
[root@cdh01 bin]# hadoop fs -ls /
Found 8 items
drwxr-xr-x   - hdfs  supergroup          0 2017-06-02 17:55 /CONFIG
drwxr-xr-x   - hbase hbase               0 2017-08-31 19:11 /hbase
drwxr-xr-x   - root  supergroup          0 2017-09-01 10:23 /kylin
[root@cdh01 bin]# ./find-hbase-dependency.sh
Retrieving hbase dependency...
[root@cdh01 bin]# ./find-hive-dependency.sh
Retrieving hive dependency...
8.启动kylin
  [root@cdh01 kylin]# bin/kylin.sh  start
  查看kylinUI日志  
[root@cdh01 kylin]# tailf logs/kylin.out
  
INFO: Starting ProtocolHandler ["http-bio-7070"] Sep 01, 2017 10:35:28 AM org.apache.coyote.AbstractProtocol start INFO: Starting ProtocolHandler ["ajp-bio-9009"] Sep 01, 2017 10:35:28 AM org.apache.catalina.startup.Catalina start INFO: Server startup in 22057 ms
  启动完成
  查看kylin server日志
[root@cdh01 kylin]# tailf logs/kylin.log
无报错,启动完成
9.登陆kylin
      http://<ip>:7070/kylin
      User: ADMIN
      Pass: KYLIN
登陆完成
4.导入官方测试数据进行测试
4.1导入数据
查看Hive default库中的表
hive> show tables; OK t1 Time taken: 0.034 seconds, Fetched: 1 row(s) hive>  
执行命令
/usr/local/apps/kylin/bin
[root&#64;cdh01 bin]# ./sample.sh
日志倒数两行
Sample cube is created successfully in project 'learn_kylin'. Restart Kylin Server or click Web UI &#61;> System Tab &#61;> Reload Metadata to take effect #这句话的意思是  例子cube已成成功创建在了  工程名称叫'learn_kylin'里面了 #重启kylin或者通过webUI &#61;> System选项卡&#61;> 重新导入元数据信息
查看Hive default库中的表,多了五张表
hive> show tables; OK kylin_account kylin_cal_dt kylin_category_groupings kylin_country kylin_sales t1 Time taken: 0.015 seconds, Fetched: 6 row(s) hive>
重新加载元数据操作图
共3步
步骤1
步骤2
步骤3
4.2查看导入模型
查看导入的信息  &#61;> 点击最上面选项卡  Model
4.3 开始cube的构建
1.点击Cube的Actions现象---->再点击Build
2.选择数据分区范围
3.查看正在构建的cube任务,点击monitor
4.坐等构建完成吧
5.好了,终于完成了
4.4 查询构建完成的cube信息
结果数据
a920259310
关注
关注
点赞
收藏
打赏
评论
kylin2.1.0+cdh5.10.1+安装部署+官方测试例子详细教程
kylin2.1.0在cdh5.10.1详细安装教程+kylin官方数据测试
复制链接
扫一扫
专栏目录
flume-ng-1.6.0-cdh5.10.1.tar.gz的下载
09-15
flume-ng-1.6.0-cdh5.10.1.tar.gz的下载。是生产中用得比较多的一个稳定版本
中标麒麟(兆芯版)Java相关工具及CDH集群安装测试
修行的博客
01-15
2319
中标麒麟安装配置
前言:
​1、MongoDB好像不适合中标麒麟,上辈子时候冤家么,接连出错,目前还在调试;
​2、文章中出现的相关包我都有,需要的小伙伴可以私聊我,我发你;
​3、剩余一个问题希望遇到的伙伴可以私聊一下,如果说安装中遇到什么问题也可以和大帅来一起探讨;
​4、相关测试及准备如下,
相关软件测试
相关软件/工具
是否可用(Yes/No)
Jdk-1.8
Ye...
评论 3
您还未登录,请先
登录
后发表或查看评论
Kylin的搭建.CDH版
qq_27787581的博客
12-01
81
CDH版本:5.16.2
1.wget http://mirrors.hust.edu.cn/apache/kylin/apache-kylin-2.6.2/apache-kylin-2.6.2-bin-cdh57.tar.gz
2.cd /opt
3.tar -zvxf apache-kylin-2.6.2-bin-cdh57.tar.gz
4.ln -s apache-kylin-2.6.2-bin-cdh57 kylin
5.vi /etc/profile
export KYLIN_HOME=/o
Kylin (二) --------- Kylin 环境搭建
最新发布
在森林里麋了鹿
10-28
296
Kylin 环境搭建
1.Kylin的安装部署
First_____的博客
03-17
1660
前提条件:
Hadoop的安装: (记得配置历史服务)
hadoop3.x版本安装部署&ndash;>直达
注意: 需要判断配置的历史服务是否管用
Zookeeper的安装:
zookeeper的安装链接部署&ndash;>直达
Hbase的安装:
hbase的安装部署地址->>直达
Hive元数据的启动:
hive安装部署地址&ndash;> 直达
注意:
系统上已经安装了hadoop, hive, hbase,并且配置且生效了环境变量;
在启动 Kylin 之前,需要先启动 Hadoop(HDFS、YARN
CDH5.10.1集群安装文档
qq_30498935的博客
09-04
675
CDH5.10.1集群安装文档
前置条件
由于部署集群需要在服务器上面安装较多东西,包含很多工具和mysql、jdk等组件,那么需要在服务器确认的时候需要跟客户确认在服务器上面是否已经安装有此类组件并且已经在使用。如果已经安装并使用,那么需要等确认清楚才可以进行后续的步骤。
CDH集群主机安装软硬件需求,如下:
操作系统
Centos7.3
Kylin安装部署
Sunshine
03-19
1452
一、安装准备
1、操作系统 Centos 7.x
2、时间问题
集群内所有节点时间一定要同步。
NTP、Chrony
3、用户
创建hadoop组和hadoop用户,并做ssh免密码登录
4、Hadoop HA集群
Hadoop 2.7.3
5、HBase
hbase 1.x
6、Hive
Hive 1.2.1,使用 mysql 存放元数据
7、准备目录
...
Kylin 安装部署
weixin_40544053的博客
04-28
321
Kylin 安装文档:
1:操作系统 Ubuntu 12.04.5 LTS
2:时间问题
时间同步
NTP,Chrony
3.用户
hadoop 如果做集群做免密登录
4:环境要求
Hadoop 2.6
hbase 1.1.3 以上
hive 1.2.1 或者2.0 mysql存放元数据
5:安装目录
cd /usr/local
mkdir /usr/locak/kylin
chown -R ...
基于ARM64银河麒麟V4编译安装hue4.2
YYC1503的博客
08-10
846
简介
Hue是一个开源的Apache Hadoop UI系统,由Cloudera Desktop演化而来,最后Cloudera公司将其贡献给Apache基金会的Hadoop社区,用Python Web框架Django实现的。通过使用Hue我们可以在浏览器端的Web控制台上与Hadoop集群进行交互来分析处理数据,例如操作HDFS上的数据,运行MapReduce Job,执行Hive的SQL语句,浏览HBase数据库等等。
环境准备
组件
版本
hadoop
2.7.5
mysql
5.7
CDH6.1.0后安装Kylin(麒麟)
weixin2006的博客
04-26
788
详细搭建过程(前提搭建好hdfs yarn zk hbase spark)
tar zxvf apache-kylin-2.5.2-bin-cdh60.tar.gz
vi /etc/profile
export KYLIN_HOME=/opt/apache-kylin-3.0.1-bin-cdh60
export HBASE_HOME=/opt/cloudera/parcels/CDH/lib/h...
CDH5.10.x安装
zisheng_wang_DATA的博客
03-26
3468
1.CDH (Cloudera&rsquo;s Distribution, including Apache Hadoop),是Hadoop众多分支中的一种,由Cloudera维护,基于稳定版本的Apache Hadoop构建,并集成了很多补丁,可直接用于生产环境。 Cloudera Manager则是为了便于在集群中进行Hadoop等大数据处理相关的服务安装和监控管理的组件,对集群中主机、Hadoop、Hiv
Cloudera怎么配置Namenode的HA(高可用)
looo000ngname的博客
06-10
537
1,环境信息
基于 Cloudera Manager5安装部署CDH5.X 文章的环境信息。
2,配置Namenode 的HA
2.1,进入HDFS界面,点击&ldquo;启用High Availability&rdquo;
2.2,输入NameService名称,这里设置为:nameservice1,点击继续按钮。
2.3,设置另一个NameNode节点,这里设置为:cdh-node3.grc。设置JournalNode节点,这里设置为:cdh-node[2-6].grc,一共5个节点。注意:NournalNode必须设置&
ClouderaManager之CDH-LZO配置
weixin_34067102的博客
07-22
229
CDH-LZO配置
下载和CDH版本对应的hadoop-lzo版本
如下:
下载地址:http://archive.cloudera.com/gplextras5/parcels/
需要下载如下三个文件:
GPLEXTRAS-5.4.0-1.cdh5.4.0.p0.27-el6.parcel
GPLEXTRAS-5.4.0-1.cdh5.4.0.p0.27-el6.parcel....
cdh5.10安装&mdash;&mdash;入门教程
archer的技术故事
03-27
5220
cdh5.10安装&mdash;&mdash;入门教程
首先介绍一下cdh是什么。cdh是用来集中管理hadoop集群的工具。它在hadoop上进行了封装,提供了webUI界面对集群的状态进行监控和操作。
下面介绍一下cdh安装时都需要安装什么。
1、cloudera-manager提供管理集群的功能。
2、安装好cloudera-manager之后,可以通过图形界面安装parcel,然后再安装hadoop...
cdh-5.10.0搭建安装
weixin_30655569的博客
05-23
172
1.修改主机名为master, slave1, slave2
vim /etc/sysconfig/network
HOSTNAME = master
HOSTNAME = slave1
HOSTNAME = slave2
2.修改hosts文件(三个节点都要设置)
vim /etc/hosts
192.168.1.7 master
192.168.1.8 sla...
Kylin集群安装部署
忄凝^的博客
08-18
320
这里目录标题3、`Kylin`集群安装部署3.1. 下载上传3.1.2 修改 hive 配置文件3.1.3 修改 hbase 配置文件3.1.4 配置 kylin 相关环境变量3.1.5 修改配置文件3.1.6 拷贝kylin到其他节点3.1.7 启动3.1.8 关机拍照
3、Kylin集群安装部署
安装前提
OS: CentOS 7
java 1.8
zookeeper 3.4.5
https://blog.csdn.net/weixin_43660536/article/details/1183
CDH安装Kylin2.0及操作
奋斗的小鸟专栏
09-27
4253
CDH安装Kylin2.0及操作
第一步,安装
1,安装包准备
最新安装包版本为2.0,下载链接如下:http://kylin.apache.org/download/
下载内容为apache-kylin-2.0.0-bin-cdh57.tar.gz,见下图:
2,安装
通过xftp上传下载的安装包apache-kylin-2.0.0-bin-cdh57.tar.gz到CDH...
CDH 5.13.1安装,整合kylin
qq_31866793的博客
06-30
2709
参考:微信公众号 Hadoop 实操(强烈推荐)https://mp.weixin.qq.com/s/dLM3WF0Mr178Girs0tJc9g补充代码地址:https://github.com/fayson/cdhproject一,安装环境 1)JDK 1.8 2)Centos6.5 3) mysql 5.6 在节点master上 4) CDH 5.13 5)总共是3...
“相关推荐”对你有帮助么?
非常没帮助
没帮助
一般
有帮助
非常有帮助
提交
©️2022 CSDN
皮肤主题:编程工作室
设计师:CSDN官方博客
返回首页
a920259310
CSDN认证博客专家
CSDN认证企业博客
码龄8年
暂无认证
原创
50万+
周排名
81万+
总排名
2万+
访问
等级
327
积分
粉丝
获赞
评论
收藏
私信
关注
热门文章
kylin2.1.0+cdh5.10.1+安装部署+官方测试例子详细教程
9337
Redis动态删除主从节点
5415
mapreduce原理全剖析map+shuffle+reducer 全部过程
3682
Redis动态增加节点
1131
linux时间同步服务NTP安装配置教程
889
分类专栏
spring
struts
hibernate
springMVC
Mybatis
Ehcache
tomcat远程debug
1篇
mapreduce详解
2篇
linux
1篇
mysql
1篇
redis
3篇
spark
1篇
kylin
1篇
最新评论
Redis动态删除主从节点
M-artin.online:
不知所云
kylin2.1.0+cdh5.10.1+安装部署+官方测试例子详细教程
普通网友:
使用sample数据进行build cube的时候,到第三步出现error, 发现是kylin到hdfs上去找hive的jar包【 hive-metastore-2.0.0.jar 】了。。。但是配置的时候明明配的是本地路径。。 是不是我哪里配置出问题? 。。 第一次报错的时候,我上传了jar包到相应路径,但是还是这个错,只是在不同路径下了。。 。 我在简书上看到一个说法是说hive的hadoop依赖问题,【https://www.jianshu.com/p/84b39b50b998 】 , 不过没有太明白。 不知道楼主有没有遇到过? 遇到过的话又是如何处理的呢?
kylin2.1.0+cdh5.10.1+安装部署+官方测试例子详细教程
zengrui_ops:
点击【System】之后,出现Oops:Failed to take action,请教是怎么回事?楼上的兄弟解决没?
kylin2.1.0+cdh5.10.1+安装部署+官方测试例子详细教程
诚恳:
点击【System】之后,出现Oops:Failed to take action,请教是怎么回事?
您愿意向朋友推荐“博客详情页”吗?
强烈不推荐
不推荐
一般般
推荐
强烈推荐
提交
最新文章
Redis动态删除主从节点
Redis动态增加节点
Spark 动态资源分配(Dynamic Resource Allocation) 解析
2017年7篇
2016年3篇
目录
目录
分类专栏
spring
struts
hibernate
springMVC
Mybatis
Ehcache
tomcat远程debug
1篇
mapreduce详解
2篇
linux
1篇
mysql
1篇
redis
3篇
spark
1篇
kylin
1篇
目录
评论 3
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
查看更多评论
打赏作者
a920259310
你的鼓励将是我创作的最大动力
¥2
¥4
¥6
¥10
¥20
输入1-500的整数
余额支付
(余额:-- )
扫码支付
扫码支付:¥2
获取中
扫码支付
您的余额不足,请更换扫码支付或充值
打赏作者
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额
抵扣说明:
1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。 2.余额无法直接购买下载,可以购买VIP、C币套餐、付费专栏及课程。
余额充值