［ETL实践指南］基于Kettle的MaxCompute插件实现数据上云-低调大师

［ETL实践指南］基于Kettle的MaxCompute插件实现数据上云

2017-01-17 658

本文用到的

阿里云数加－大数据计算服务MaxCompute产品地址：https://www.aliyun.com/product/odps

简介

Kettle是一款开源的ETL工具，纯java实现，可以运行于Windows, Unix, Linux上运行，提供图形化的操作界面，可以通过拖拽控件的方式，方便地定义数据传输的拓扑。Kettle支持丰富的数据输入输出源，数据库支持Oracle，MySql，DB2等，也支持业界各种开源的大数据系统，例如HDFS, HBase, Cassandra, MongoDB等。本文将介绍如何利用MaxCompute的插件无缝对接阿里云的大数据计算平台——MaxCompute。

环境要求

JDK (1.6以上，推荐1.7)
Kettle（建议5.4.0以后的版本）
Apache Maven 3.x

插件部署

下载Max

微信关注我们

原文链接：https://yq.aliyun.com/articles/68911

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

年末将至，如何做好安全防范？

年末，黑客勒索事件频发。本周，黑客又将目标转向了Elasticsearch。 1月16日，阿里云官网公告提醒，安装了Elasticsearch且未做特殊安全配置的服务器，可能存在数据被删除或业务被入侵的安全风险。这，还只是开始！一旦闻到了猎物的血腥味，成群的鲨鱼会围上来。卡巴斯基在2016年12月份发布的年度热门事件：加密勒索报告显示，截止到2016年，全球有114个国家受到加密勒索事件的影响，共发现44000多个勒索软件样本。亚信安全发布的勒索软件风险研究报告显示，近十个月内，全球传播的勒索软件数量增长了15倍，中国勒索软件数量增长更是突破了67倍。寻根溯源对勒索事件的数据进行分析不难发现，被勒索软件入侵的受害者，都有两大共性：关键账号存在弱口令或无认证机制服务器登录关键账号(root、administrator)密码简单或空密码

2017-01-17

602

前文背景：【Best Practice】基于阿里云数加·StreamCompute快速构建网站日志实时分析大屏最近很多云栖社区的网友们看了上面一篇文章后都在追我下一篇，由于时间关系先给各位抱歉。那本篇文章我们来阐述如何通过MaxCompute和Quick BI来完成网站用户画像分析。还是和以往一样，看看整个数据架构图如下：开通阿里云数加产品前提条件为了保证整个实验的顺利开展，需要用户使用开通相关产品及服务，包括DataHub、MaxCompute、AnalyticDB、Data IDE、Quick BI。业务场景数据来源于网站上的HTTP访问日志数据，基于这份网站日志来实现如下分析需求： n统计并展现网站的PV和UV，并能够按照用户的终端类型（如Android、iPad、iPhone、PC等）分别统计。 n统计并展现网站的流量来源。 n统计并展现网站的用户地域分布。【说明】浏览次数（PV）和独立访客（UV）是衡量网站流量的两项最基本指标。用户每打开一个网站页面，记录一个PV，多次打开同一页面PV 累计多次。独立访客是指一天内，访问网站的不重复用户数，一天内同一访客多次访...

2017-01-19

885

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。