kettle spoon连接hbase-低调大师

kettle spoon连接hbase

2017-11-13 621

spoon下载安装地址：http://www.pentaho.com/download

选择 Download Windows ，只有windows 版的才是spoon，下载解压后即可使用，无需安装。

spoon是纯java编写的，所以使用前必需安装java的jdk包

下载地址：http://www.oracle.com/technetwork/java/javase/downloads/index.html

连接HBase需要配置（实际连接HBase是通过zookeeper服务）

进入spoon解压目录，打开 plugins\pentaho-big-data-plugin\plugin.properties 文件

修改 active.hadoop.configuration 配置项（配置驱动集目录名），默认这里为空。当前已经修改好。

进入目录 plugins\pentaho-big-data-plugin\hadoop-configurations 查看当前可用驱动集目录

里面的4个目录均为 hadoop-configurations 驱动集，链接HBase 需要 zookeeper-*.jar 文件

如在cdh52目录 lib 下：

那么 cdh52 就驱动集可以使用。

HBase启动时会绑定服务器的hostname值，所以在spoon机器中需要绑定相同的host否则无法连接。

在HBase机器上输入命令：

 
        hostname

如：

 
        root@ubuntu:~
        # hostname 
       
        ubuntu

然后修改spoon机器上的hosts

打开 C:\Windows\System32\drivers\etc\hosts 文件

如HBase服务器的IP是 192.168.0.10

则在 hosts 文件中新加一行，并保存。

 
        192.168.0.10 ubuntu

打开spoon，进入spoon解压目录双击 Spoon.bat 文件

注：其实在linux下也可以运行（远程连接不行）只要打开spoon.sh脚本即可

新建转换，并且点击 Big Data > HBase Input

双击 HBase Input 图标 > 点击New 弹出编辑 Hadoop cluster窗口

修改Cluster Name 值（即这个HBase 连接别名），修改ZooKeeper 如HBase所在服务器IP为192.168.0.10 默认HBase 端口号为 2182

确定，然后在 Hadoop Cluster 选中 hbase-test

进入Create/Edit mappings选择卡，按以下步骤操作

然后返回 Configure query 选项卡，按步骤操作

然后鼠标右键HBase Input > 选择Preview > 快速启动

即可查看数据。

spoon下载安装地址：http://www.pentaho.com/download

选择 Download Windows ，只有windows 版的才是spoon，下载解压后即可使用，无需安装。

spoon是纯java编写的，所以使用前必需安装java的jdk包

下载地址：http://www.oracle.com/technetwork/java/javase/downloads/index.html

连接HBase需要配置（实际连接HBase是通过zookeeper服务）

进入spoon解压目录，打开 plugins\pentaho-big-data-plugin\plugin.properties 文件

修改 active.hadoop.configuration 配置项（配置驱动集目录名），默认这里为空。当前已经修改好。

进入目录 plugins\pentaho-big-data-plugin\hadoop-configurations 查看当前可用驱动集目录

里面的4个目录均为 hadoop-configurations 驱动集，链接HBase 需要 zookeeper-*.jar 文件

如在cdh52目录 lib 下：

那么 cdh52 就驱动集可以使用。

HBase启动时会绑定服务器的hostname值，所以在spoon机器中需要绑定相同的host否则无法连接。

在HBase机器上输入命令：

 
         hostname

如：

 
         root@ubuntu:~
         # hostname 
        
         ubuntu

然后修改spoon机器上的hosts

打开 C:\Windows\System32\drivers\etc\hosts 文件

如HBase服务器的IP是 192.168.0.10

则在 hosts 文件中新加一行，并保存。

 
         192.168.0.10 ubuntu

打开spoon，进入spoon解压目录双击 Spoon.bat 文件

注：其实在linux下也可以运行（远程连接不行）只要打开spoon.sh脚本即可

新建转换，并且点击 Big Data > HBase Input

双击 HBase Input 图标 > 点击New 弹出编辑 Hadoop cluster窗口

修改Cluster Name 值（即这个HBase 连接别名），修改ZooKeeper 如HBase所在服务器IP为192.168.0.10 默认HBase 端口号为 2182

确定，然后在 Hadoop Cluster 选中 hbase-test

进入Create/Edit mappings选择卡，按以下步骤操作

然后返回 Configure query 选项卡，按步骤操作

然后鼠标右键HBase Input > 选择Preview > 快速启动

即可查看数据。

本文转自 ttlxihuan 51CTO博客，原文链接:http://blog.51cto.com/php2012web/1661247

微信关注我们

原文链接：https://yq.aliyun.com/articles/542842

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Elasticsearch-1.7.0安装部署

1、首先去elasticsearch官网下载软件包版本1.7.0版本. 1 #wgethttps://download.elastic.co/elasticsearch/elasticsearch/elasticsearch-1.7.0.tar.gz 2、解压elasticsearch-1.7.0.tar.gz 软件包. 1 #tarzxfelasticsearch-1.7.0.tar.gz 3、es配置文件参数解释(真正配置不全用的到)： #集群名称标识了你的集群，自动探查会用到它。 #如果你在同一个网络中运行多个集群，那就要确保你的集群名称是独一无二的. 1 cluster.name: test -elasticsearch #节点名称会在启动的时候自动生成，所以你可以不用手动配置。你也可以给节点指定一个特定的名称. 1 node.name: "elsearch1" #允许这个节点被选举为一个主节点(默认为允许) 1 #node.master:true #允许这个节点存储数据(默认为允许) 1 #node.data:true #You can exploit these setti...

2017-11-14

527

地址和最近、更新、最频繁的微博等应用场景。本文转自 ChinaUnicom110 51CTO博客，原文链接: http://blog.51cto.com/xingyue2011/1949780

2017-11-14

647

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。