Apache Kylin™是一个开源的分布式分析引擎,提供Hadoop之上的SQL查询接口及多维分析(OLAP)能力以支持超大规模数据,最初由eBay Inc. 开发并贡献至开源社区。它能在亚秒内查询巨大的Hive表。
从官网的介绍来看Kylin是一个OLAP的数据查询引擎,其特点就是快。公司最近准备引入Kylin做数据分析,原来也听说过
但一直没有接触,现在正好可以验证下Kylin是否是传说中那么NB,今天我们先来看看如何安装部署Kylin。
由于Kylin本身只是一个Server,所以安装部署还是比较简单的,但是它的前提要求是Hadoop,Hive,Hbase必须已经安装而且能正常工作,在这里关于Hadoop生态的一些框架的安装部署就不再重复写了,有兴趣的可以看我以前的博文。
下面来看下一些基础软件的版本:
Hadoop2.7.2
Hive2.1.1
Hbase1.2.0
Zookeeper3.4.8
Kylin2.0.0
在这里假设你的Hadoop,Hive,Hbase都已经安装成功并能正常运行。
然后去Kylin官网下载对应的kylin版本,链接如下:
http://kylin.apache.org/cn/download/
下载的具体版本是:
apache-kylin-2.0.0-bin-hbase1x.tar.gz
下载成功后,解压到根目录,然后重命名目录为kylin并在.bash_profile 文件中,配置kylin的环境变量:
export KYLIN_HOME=/home/search/kylin
export CLASSPATH=$CLASSPATH:$KYLIN_HOME/lib
export PATH=$KYLIN_HOME/bin:$PATH
然后执行bin/check-env.sh 脚本,检查环境变量是否有缺失的,校验通过之后,可以执行如下脚本启动:
bin/kylin.sh start // 启动
bin/kylin.sh stop // 停止
这里需要注意一点,Kylin当前最新的版本只支持spark1.6.0的版本,原来我的机器中,安装了一个spark2.0的版本,导致
启动kylin失败,终端仅仅输出spark assembly lib not found这个提示信息,别的什么也没有,导致我误以为我编译的spark有问题,后来我将我的spark移除,重新启动kylin才成功,
另外一个注意的地方是Hadoop的mr-jobhistory-daemon.sh 进程也要启动起来。
启动成功之后,访问地址:http://hostname:7070/kylin(kylin的启动过程感觉有点慢,差不多1分钟之后,在访问这个地址基本能生效)
并输入默认的用户名和密码:ADMIN / KYLIN 成功登录之后,看到下面的页面,就代表安装部署成功了。
- 大小: 29.6 KB
- 大小: 27.7 KB
分享到:
相关推荐
Apache Kylin安装部署Apache Kylin安装部署Apache Kylin安装部署
Apache Kylin快速入门教程
Apache Kylin - Tuning - Dong Li;Apache Kylin - Tuning - Dong Li
Apache kylin 环境搭建笔记,包括自带sample的加载和简单测试。
Apache Kylin Tutorial, 官方网站整理而来。 Apache Kylin Tutorial Apache Kylin Tutorial Apache Kylin Tutorial Apache Kylin Tutorial Apache Kylin Tutorial
Apache Kylin是Hadoop大数据平台上的一个开源OLAP引擎。它采用 多维立方体预计算技术,可以将大数据的SQL查询速度提升到亚秒级别。 相对于之前的分钟乃至小时级别的查询速度,亚秒级别速度是百倍到千 倍的提升,该...
Apache Kylin 作为领先的大数据OLAP分析平台步入了2.0时代,正逐渐从Hadoop上的传统OLAP演变为一个实时数据仓库,新的版本支持灵活的雪花模型和更加全面的SQL语法,引入了更加先进的Spark Cubing构建引擎,更好地...
Apache Kylin权威指南 (大数据技术丛书).epub
Apache Kylin在各行业的实践
Apache Kylin权威指南.pdf
CVE-2020-13925 Apache Kylin 远程命令执行漏洞
Apache Kylin权威指南 Apache Kylin权威指南 Apache Kylin权威指南
基于Apache Kylin 构建大数据分析平台,这本书挺不错的
介绍Apache Kylin的背景,技术架构及演进,产品功能和性能等内容,以及开源现状和发展方向等,例如与Spark/Drill等的集成等。Apache Kylin是由eBay研发并贡献给开源社区的Hadoop上的分布式大规模联机分析(OLAP)...
基于Apache Kylin的云上大数据分析平台.pdf
Apache Kylin操作流程截图分享,及配套文字讲解,仅做参考。