kylin_学习_01_kylin安装部署-低调大师

kylin_学习_01_kylin安装部署

2018-03-19 643

一、环境准备

根据官方文档，kylin是需要运行在hadoop环境下的，如下图：

二、kylin下载与解压

1.下载地址

前往官方 http://kylin.apache.org/download

可发现提供了一个镜像下载地址，如下：

http://mirrors.shu.edu.cn/apache/kylin/apache-kylin-2.3.0/apache-kylin-2.3.0-hbase1x-bin.tar.gz

2.下载

使用命令进行下载

wget  http://mirrors.shu.edu.cn/apache/kylin/apache-kylin-2.3.0/apache-kylin-2.3.0-hbase1x-bin.tar.gz

或者先在本地下载，然后上传服务器

3.解压

tar   -zxvf   apache-kylin-2.3.0-hbase1x-bin.tar.gz

三、kylin配置

1.配置环境变量

（1）编辑 profile 文件

vim /etc/profile

（2）设置 KYLIN_HOME ，并将其添加到path中。并修改 CATALINA_HOME 为 kylin 下的 tomcat

# 1. java
export JAVA_HOME=/usr/java/jdk1.7.0_80
export CLASSPATH=.:$JAVA_HOME/jre/lib/rt.jar:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

# 2. Tomcat
#export CATALINA_HOME=/developer/apache-tomcat-7.0.73
#export CATALINA_HOME=/developer/saiku-server/tomcat
export CATALINA_HOME=/developer/apache-kylin-2.3.0-bin/tomcat

# 3. Maven
export MAVEN_HOME=/developer/apache-maven-3.0.5

# 4. hadoop
export HADOOP_HOME=/developer/hadoop-2.6.0

# 5. hbase
export HBASE_HOME=/developer/hbase-1.2.0

# 6. hive
export HIVE_HOME=/developer/apache-hive-1.1.0-bin
export HIVE_CONF_DIR=${HIVE_HOME}/conf
export HCAT_HOME=$HIVE_HOME/hcatalog

# 7. kylin
export KYLIN_HOME=/developer/apache-kylin-2.3.0-bin
export hive_dependency=$HIVE_HOME/conf:$HIVE_HOME/lib/*:$HCAT_HOME/share/hcatalog/hive-hcatalog-core-1.1.0.jar


#Path
# 1. big data
export PATH=$KYLIN_HOME/bin:$PATH
export PATH=$HIVE_HOME/bin:$HBASE_HOME/bin:$HADOOP_HOME/bin:$PATH
export PATH=$MAVEN_HOME/bin:$CATALINA_HOME/bin:$JAVA_HOME/bin:$PATH
export LC_ALL=en_US.UTF-8

2.配置 kylin.sh

在文件开始的地方，添加如下配置：

export KYLIN_HOME=/developer/apache-kylin-2.3.0-bin

export HBASE_CLASSPATH_PREFIX=$CATALINA_HOME/bin/bootstrap.jar:$CATALINA_HOME/bin/tomcat-juli.jar:$CATALINA_HOME/lib/*:$hive_dependency:$HBASE_CLASSPATH_PREFIX

四、启动kylin

1.确保 hadoop、hbase已经启动

（1）启动hadoop

进入hadoop 的 sbin 目录，执行

./start-all.sh

(2) 启动 hbase

进入hbase的 bin 目录，执行

./start-hbase.sh

2.启动 kylin

进入 kylin 的 bin 目录，执行

./kylin.sh start

即可启动kylin

3.访问kylin管理界面

启动kylin之后，浏览器访问：http://your_hostname:7070/kylin。输入用户名 ADMIN 、密码 KYLIN ，即可登录

例如：

192.168.1.102:7070/kylin

五、配置hive数据源

1.配置数据源

（1）依次选择 Model -> Data Source -> Load Hive Table

（2）输入 hive 中数据库的表名格式为：数据库名.数据表名

如：db_hiveTest.student ，然后点击Sync即可。

添加成功后，效果如下图：

五、参考资料

1.官方安装向导：

Installation Guide（ http://kylin.apache.org/cn/docs23/install/index.html ）

2.HDP下载地址：

https://zh.hortonworks.com/downloads/

微信关注我们

原文链接：https://yq.aliyun.com/articles/621343

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

使用 spring boot 开发通用程序

tag: spring 学习笔记 date: 2018-03 spring 是什么？spring 核心是应用组件容器，管理组件生命周期，依赖关系，并提倡面向接口编程实现模块间松耦合。spring boot 是什么？spring boot 是按特定（约定）方式使用 spring 及相关程序库以简化应用开发的一套框架和工具。以下统称 spring。本文使用 spring boot 2.0.0.RELEASE 测试。 ApplicationRunner spring 广泛应用于 web 应用开发，使用 spring 开发命令行工具、后台服务等通用程序也非常方便。开发 web 应用时，web 服务器（如 tomcat）启动后即开始监听请求。开发命令行工具时，只需要实现一个 ApplicationRunner，spring 容器启动后即自动执行之。

2018-03-20

568

用python进行数据挖掘和机器学习一直很火，所以近段时间就在自学《机器学习实战》这本书，发现里面讲支持向量机时对原理公式的推导讲得并不详细，上网查资料发现讲得并不很系统，有点零碎的感觉，导致对于我这种小白的童鞋来说颇为艰难，因此经过长时间的资料查询后准备综合各路大神的思路和我自己的理解来写一波关于公式原理推导的文章。文章以《机器学习实战书》为进度进行步步拆解（大神可以略过啦~正在奋斗的小白也可以私下交流共同学习）。 SVM指的是支持向量机(外文名Support Vector Machine)，在机器学习领域，是一个有监督的学习模型，通常用来进行模式识别、分类以及回归分析。我们这里以二维图线性分类为例进行讲解，在对如下图A进行分类时,可得到很多个分割超平面，然而我们要从中选择最优的分割超平面，这便是SVM的要做的，选出最优的

2018-03-20

538

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。