MaxCompute（原ODPS）开发入门指南——数据上云篇-低调大师

MaxCompute（原ODPS）开发入门指南——数据上云篇

2017-06-06 618

MaxCompute（原ODPS）开发入门指南——数据上云篇

写在最前面

>>>进入了解更多>>>阿里云数加·MaxCompute大数据计算服务.

根据《MaxCompute（原ODPS）开发入门指南——计量计费篇》的了解，大家清楚了MaxCompute可以做什么，计费模式如何，想必大家也开通了MaxCompute想进行一次POC，但是大家遇到第一个问题一定是我的数据如何上云？

可通过多种方式数据流入MaxCompute

MaxCompute（原ODPS）提供了多种通道数据可以流入MaxCompute，包括MaxCompute原生的Tunnel，以及阿里云体系内的Log、DataX和数据集成，以及开源生态中的Flume、Logstash和Fluentd。以下为大家一一道来，大家视各自情况进行选择。

① Ma

微信关注我们

原文链接：https://yq.aliyun.com/articles/96391

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Apache 基金会宣布 Apache Ranger 毕业成为顶级项目

2月8日，Apache 软件基金会宣布，Apache Ranger 已经成功地从孵化毕业，成为基金会的一个新的顶级项目。 Apache Ranger 是一个集中式框架，提供操作、监控、管理复杂的数据权限，它提供一个集中的管理机制，管理基于 Apache Hadoop 生态圈的所有数据权限。 Apache Ranger 还提供最全面的安全覆盖，本地支持众多 Apache 项目，包括Atlas（孵化中）、HBase、HDFS、Hive、Kafka、Knox、NiFi、Solr、Storm 和 YARN。 Apache Ranger 提供了一种简单有效的方法来设置访问控制策略，并通过遵循行业最佳实践来审核整个 Hadoop 堆栈中的数据访问。 Ranger 的一个主要优点是，控制策略可以由安全管理员从单独的一个地方访问并在 Hadoop 生态系统中一致地管理。控制台：插件：Knox网关：文章转载自开源中国社区 [http://www.oschina.net]

2017-06-07

686

Java 安装Java8，设置JAVA_HOME，并添加 %JAVA_HOME%\bin 到环境变量PATH中 E:\java -version java version "1.8.0_60" Java(TM) SE Runtime Environment (build 1.8.0_60-b27) Java HotSpot(TM) 64-Bit Server VM (build 25.60-b23, mixed mode) Scala 下载解压Scala 2.11，设置SCALA_HOME，并添加 %SCALA_HOME%\bin 到PATH中 E:\ scala -verion Scala code runner version 2.11.7 -- Copyright 2002-2013, LAMP/EPFL Spark 下载解压Spark 2.1, 设置SPARK_HOME，并添加 %SPARK_HOME%\bin 到PATH中，此时尝试在控制台运行spark-shell，出现如下错误提示无法定位winutils.exe。 E:\>spark-shell Using Spar...

2017-06-07

493

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。