kylin_学习_01_kylin安装部署-低调大师

kylin_学习_01_kylin安装部署

2018-03-19 667

一、环境准备

根据官方文档，kylin是需要运行在hadoop环境下的，如下图：

二、kylin下载与解压

1.下载地址

前往官方 http://kylin.apache.org/download

可发现提供了一个镜像下载地址，如下：

http://mirrors.shu.edu.cn/apache/kylin/apache-kylin-2.3.0/apache-kylin-2.3.0-hbase1x-bin.tar.gz

2.下载

使用命令进行下载

wget  http://mirrors.shu.edu.cn/apache/kylin/apache-kylin-2.3.0/apache-kylin-2.3.0-hbase1x-bin.tar.gz

或者先在本地下载，然后上传服务器

3.解压

tar   -zxvf   apache-kylin-2.3.0-hbase1x-bin.tar.gz

三、kylin配置

1.配置环境变量

（1）编辑 profile 文件

vim /etc/profile

（2）设置 KYLIN_HOME ，并将其添加到path中。并修改 CATALINA_HOME 为 kylin 下的 tomcat

# 1. java
export JAVA_HOME=/usr/java/jdk1.7.0_80
export CLASSPATH=.:$JAVA_HOME/jre/lib/rt.jar:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

# 2. Tomcat
#export CATALINA_HOME=/developer/apache-tomcat-7.0.73
#export CATALINA_HOME=/developer/saiku-server/tomcat
export CATALINA_HOME=/developer/apache-kylin-2.3.0-bin/tomcat

# 3. Maven
export MAVEN_HOME=/developer/apache-maven-3.0.5

# 4. hadoop
export HADOOP_HOME=/developer/hadoop-2.6.0

# 5. hbase
export HBASE_HOME=/developer/hbase-1.2.0

# 6. hive
export HIVE_HOME=/developer/apache-hive-1.1.0-bin
export HIVE_CONF_DIR=${HIVE_HOME}/conf
export HCAT_HOME=$HIVE_HOME/hcatalog

# 7. kylin
export KYLIN_HOME=/developer/apache-kylin-2.3.0-bin
export hive_dependency=$HIVE_HOME/conf:$HIVE_HOME/lib/*:$HCAT_HOME/share/hcatalog/hive-hcatalog-core-1.1.0.jar


#Path
# 1. big data
export PATH=$KYLIN_HOME/bin:$PATH
export PATH=$HIVE_HOME/bin:$HBASE_HOME/bin:$HADOOP_HOME/bin:$PATH
export PATH=$MAVEN_HOME/bin:$CATALINA_HOME/bin:$JAVA_HOME/bin:$PATH
export LC_ALL=en_US.UTF-8

2.配置 kylin.sh

在文件开始的地方，添加如下配置：

export KYLIN_HOME=/developer/apache-kylin-2.3.0-bin

export HBASE_CLASSPATH_PREFIX=$CATALINA_HOME/bin/bootstrap.jar:$CATALINA_HOME/bin/tomcat-juli.jar:$CATALINA_HOME/lib/*:$hive_dependency:$HBASE_CLASSPATH_PREFIX

四、启动kylin

1.确保 hadoop、hbase已经启动

（1）启动hadoop

进入hadoop 的 sbin 目录，执行

./start-all.sh

(2) 启动 hbase

进入hbase的 bin 目录，执行

./start-hbase.sh

2.启动 kylin

进入 kylin 的 bin 目录，执行

./kylin.sh start

即可启动kylin

3.访问kylin管理界面

启动kylin之后，浏览器访问：http://your_hostname:7070/kylin。输入用户名 ADMIN 、密码 KYLIN ，即可登录

例如：

192.168.1.102:7070/kylin

五、配置hive数据源

1.配置数据源

（1）依次选择 Model -> Data Source -> Load Hive Table

（2）输入 hive 中数据库的表名格式为：数据库名.数据表名

如：db_hiveTest.student ，然后点击Sync即可。

添加成功后，效果如下图：

五、参考资料

1.官方安装向导：

Installation Guide（ http://kylin.apache.org/cn/docs23/install/index.html ）

2.HDP下载地址：

https://zh.hortonworks.com/downloads/

微信关注我们

原文链接：https://yq.aliyun.com/articles/621343

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

使用 spring boot 开发通用程序

tag: spring 学习笔记 date: 2018-03 spring 是什么？spring 核心是应用组件容器，管理组件生命周期，依赖关系，并提倡面向接口编程实现模块间松耦合。spring boot 是什么？spring boot 是按特定（约定）方式使用 spring 及相关程序库以简化应用开发的一套框架和工具。以下统称 spring。本文使用 spring boot 2.0.0.RELEASE 测试。 ApplicationRunner spring 广泛应用于 web 应用开发，使用 spring 开发命令行工具、后台服务等通用程序也非常方便。开发 web 应用时，web 服务器（如 tomcat）启动后即开始监听请求。开发命令行工具时，只需要实现一个 ApplicationRunner，spring 容器启动后即自动执行之。

2018-03-20

592

用python进行数据挖掘和机器学习一直很火，所以近段时间就在自学《机器学习实战》这本书，发现里面讲支持向量机时对原理公式的推导讲得并不详细，上网查资料发现讲得并不很系统，有点零碎的感觉，导致对于我这种小白的童鞋来说颇为艰难，因此经过长时间的资料查询后准备综合各路大神的思路和我自己的理解来写一波关于公式原理推导的文章。文章以《机器学习实战书》为进度进行步步拆解（大神可以略过啦~正在奋斗的小白也可以私下交流共同学习）。 SVM指的是支持向量机(外文名Support Vector Machine)，在机器学习领域，是一个有监督的学习模型，通常用来进行模式识别、分类以及回归分析。我们这里以二维图线性分类为例进行讲解，在对如下图A进行分类时,可得到很多个分割超平面，然而我们要从中选择最优的分割超平面，这便是SVM的要做的，选出最优的

2018-03-20

565

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。