kettle spoon连接hbase-低调大师

kettle spoon连接hbase

2017-11-13 667

spoon下载安装地址：http://www.pentaho.com/download

选择 Download Windows ，只有windows 版的才是spoon，下载解压后即可使用，无需安装。

spoon是纯java编写的，所以使用前必需安装java的jdk包

下载地址：http://www.oracle.com/technetwork/java/javase/downloads/index.html

连接HBase需要配置（实际连接HBase是通过zookeeper服务）

进入spoon解压目录，打开 plugins\pentaho-big-data-plugin\plugin.properties 文件

修改 active.hadoop.configuration 配置项（配置驱动集目录名），默认这里为空。当前已经修改好。

进入目录 plugins\pentaho-big-data-plugin\hadoop-configurations 查看当前可用驱动集目录

里面的4个目录均为 hadoop-configurations 驱动集，链接HBase 需要 zookeeper-*.jar 文件

如在cdh52目录 lib 下：

那么 cdh52 就驱动集可以使用。

HBase启动时会绑定服务器的hostname值，所以在spoon机器中需要绑定相同的host否则无法连接。

在HBase机器上输入命令：

 
        hostname

如：

 
        root@ubuntu:~
        # hostname 
       
        ubuntu

然后修改spoon机器上的hosts

打开 C:\Windows\System32\drivers\etc\hosts 文件

如HBase服务器的IP是 192.168.0.10

则在 hosts 文件中新加一行，并保存。

 
        192.168.0.10 ubuntu

打开spoon，进入spoon解压目录双击 Spoon.bat 文件

注：其实在linux下也可以运行（远程连接不行）只要打开spoon.sh脚本即可

新建转换，并且点击 Big Data > HBase Input

双击 HBase Input 图标 > 点击New 弹出编辑 Hadoop cluster窗口

修改Cluster Name 值（即这个HBase 连接别名），修改ZooKeeper 如HBase所在服务器IP为192.168.0.10 默认HBase 端口号为 2182

确定，然后在 Hadoop Cluster 选中 hbase-test

进入Create/Edit mappings选择卡，按以下步骤操作

然后返回 Configure query 选项卡，按步骤操作

然后鼠标右键HBase Input > 选择Preview > 快速启动

即可查看数据。

spoon下载安装地址：http://www.pentaho.com/download

选择 Download Windows ，只有windows 版的才是spoon，下载解压后即可使用，无需安装。

spoon是纯java编写的，所以使用前必需安装java的jdk包

下载地址：http://www.oracle.com/technetwork/java/javase/downloads/index.html

连接HBase需要配置（实际连接HBase是通过zookeeper服务）

进入spoon解压目录，打开 plugins\pentaho-big-data-plugin\plugin.properties 文件

修改 active.hadoop.configuration 配置项（配置驱动集目录名），默认这里为空。当前已经修改好。

进入目录 plugins\pentaho-big-data-plugin\hadoop-configurations 查看当前可用驱动集目录

里面的4个目录均为 hadoop-configurations 驱动集，链接HBase 需要 zookeeper-*.jar 文件

如在cdh52目录 lib 下：

那么 cdh52 就驱动集可以使用。

HBase启动时会绑定服务器的hostname值，所以在spoon机器中需要绑定相同的host否则无法连接。

在HBase机器上输入命令：

 
         hostname

如：

 
         root@ubuntu:~
         # hostname 
        
         ubuntu

然后修改spoon机器上的hosts

打开 C:\Windows\System32\drivers\etc\hosts 文件

如HBase服务器的IP是 192.168.0.10

则在 hosts 文件中新加一行，并保存。

 
         192.168.0.10 ubuntu

打开spoon，进入spoon解压目录双击 Spoon.bat 文件

注：其实在linux下也可以运行（远程连接不行）只要打开spoon.sh脚本即可

新建转换，并且点击 Big Data > HBase Input

双击 HBase Input 图标 > 点击New 弹出编辑 Hadoop cluster窗口

修改Cluster Name 值（即这个HBase 连接别名），修改ZooKeeper 如HBase所在服务器IP为192.168.0.10 默认HBase 端口号为 2182

确定，然后在 Hadoop Cluster 选中 hbase-test

进入Create/Edit mappings选择卡，按以下步骤操作

然后返回 Configure query 选项卡，按步骤操作

然后鼠标右键HBase Input > 选择Preview > 快速启动

即可查看数据。

本文转自 ttlxihuan 51CTO博客，原文链接:http://blog.51cto.com/php2012web/1661247

微信关注我们

原文链接：https://yq.aliyun.com/articles/542842

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Elasticsearch-1.7.0安装部署

1、首先去elasticsearch官网下载软件包版本1.7.0版本. 1 #wgethttps://download.elastic.co/elasticsearch/elasticsearch/elasticsearch-1.7.0.tar.gz 2、解压elasticsearch-1.7.0.tar.gz 软件包. 1 #tarzxfelasticsearch-1.7.0.tar.gz 3、es配置文件参数解释(真正配置不全用的到)： #集群名称标识了你的集群，自动探查会用到它。 #如果你在同一个网络中运行多个集群，那就要确保你的集群名称是独一无二的. 1 cluster.name: test -elasticsearch #节点名称会在启动的时候自动生成，所以你可以不用手动配置。你也可以给节点指定一个特定的名称. 1 node.name: "elsearch1" #允许这个节点被选举为一个主节点(默认为允许) 1 #node.master:true #允许这个节点存储数据(默认为允许) 1 #node.data:true #You can exploit these setti...

2017-11-13

571

地址和最近、更新、最频繁的微博等应用场景。本文转自 ChinaUnicom110 51CTO博客，原文链接: http://blog.51cto.com/xingyue2011/1949780

2017-11-13

697

资源下载

更多资源

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。