阿里云全新一代企业级新品解读—通过MaxCompute Studio实践大数据时代的DevOps-低调大师

阿里云全新一代企业级新品解读—通过MaxCompute Studio实践大数据时代的DevOps

2017-10-10 591

今天是2017杭州·云栖大会的第一天，这场科技盛宴吸引了来自全球的参展商、开发者、相关从业人员以及科技爱好者。在今天上午的主论坛，阿里云总裁胡晓明在发言中重点提及的新一代计算平台MaxCompute会在本次大会中多次亮相。

作为大数据计算服务的基石，MaxCompute不仅会在本次大会上发布作为全球BigBench测评第一计算引擎的测评结果，更在14日上午举办阿里云大数据计算服务（MaxCompute）专场。同时也会在云栖大会落幕后，贴身为广大开发者奉上《通过MaxCompute Studio实践大数据时代的DevOps》在线直播。

MaxCompute Studio是MaxCompute 新推出的数据集成开发环境（IDE），为开发者提供了数据开发调试—命令行工具集成—自助作业分析诊断的全面解决方案。直播将通过MaxCompute

微信关注我们

原文链接：https://yq.aliyun.com/articles/223160

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Spark使用总结与分享

背景使用spark开发已有几个月。相比于python/hive，scala/spark学习门槛较高。尤其记得刚开时，举步维艰，进展十分缓慢。不过谢天谢地，这段苦涩（bi）的日子过去了。忆苦思甜，为了避免项目组的其他同学走弯路，决定总结和梳理spark的使用经验。 Spark基础基石RDD spark的核心是RDD（弹性分布式数据集），一种通用的数据抽象，封装了基础的数据操作，如map，filter，reduce等。RDD提供数据共享的抽象，相比其他大数据处理框架，如MapReduce，Pegel，DryadLINQ和HIVE等均缺乏此特性，所以RDD更为通用。简要地概括RDD：RDD是一个不可修改的，分布的对象集合。每个RDD由多个分区组成，每个分区可以同时在集群中的不同节点上计算。RDD可以包含Python，Java和Scala中的任意对象。 Spark生态圈中应用都是基于RDD构建（下图），这一点充分说明RDD的抽象足够通用，可以描述大多数应用场景。 RDD操作类型—转换和动作 RDD的操作主要分两类：转换（transformation）和动作...

2017-10-11

661

原文链接： http://yangbingdong.com/2017/note-of-linux-command/ Preface =.= 这里只记录一些个人比较常用到的Ubuntu命令那些太基本以及太高深的就...... SSH相关保持长连接只需要在ssh命令后加上发送心跳即可： ssh -o ServerAliveInterval=30 root@123.456.88 -p 2333 生成SSH密钥和公钥打开终端，使用下面的ssh-keygen来生成RSA密钥和公钥。-t表示type，就是说要生成RSA加密的钥匙： ssh-keygen -t rsa -C "your_email@youremail.com" RSA也是默认的加密类型，所以你也可以只输入ssh-keygen，默认的RSA长度是2048位，如果你非常注重安全，那么可以指定4096位的长度： ssh-keygen -b 4096 -t rsa -C "your_email@youremail.com" 生成SSH Key的过程中会要求你指定一个文件来保存密钥，按Enter键使用默认的文件就行了，然后需要输入一个...

2017-10-11

611

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Apache Tomcat

Tomcat是Apache 软件基金会（Apache Software Foundation）的Jakarta 项目中的一个核心项目，由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定，而且免费，因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可，成为目前比较流行的Web 应用服务器。

JDK

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。