阿里云全新一代企业级新品解读—通过MaxCompute Studio实践大数据时代的DevOps-低调大师

阿里云全新一代企业级新品解读—通过MaxCompute Studio实践大数据时代的DevOps

2017-10-10 607

今天是2017杭州·云栖大会的第一天，这场科技盛宴吸引了来自全球的参展商、开发者、相关从业人员以及科技爱好者。在今天上午的主论坛，阿里云总裁胡晓明在发言中重点提及的新一代计算平台MaxCompute会在本次大会中多次亮相。

作为大数据计算服务的基石，MaxCompute不仅会在本次大会上发布作为全球BigBench测评第一计算引擎的测评结果，更在14日上午举办阿里云大数据计算服务（MaxCompute）专场。同时也会在云栖大会落幕后，贴身为广大开发者奉上《通过MaxCompute Studio实践大数据时代的DevOps》在线直播。

MaxCompute Studio是MaxCompute 新推出的数据集成开发环境（IDE），为开发者提供了数据开发调试—命令行工具集成—自助作业分析诊断的全面解决方案。直播将通过MaxCompute

微信关注我们

原文链接：https://yq.aliyun.com/articles/223160

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Spark使用总结与分享

背景使用spark开发已有几个月。相比于python/hive，scala/spark学习门槛较高。尤其记得刚开时，举步维艰，进展十分缓慢。不过谢天谢地，这段苦涩（bi）的日子过去了。忆苦思甜，为了避免项目组的其他同学走弯路，决定总结和梳理spark的使用经验。 Spark基础基石RDD spark的核心是RDD（弹性分布式数据集），一种通用的数据抽象，封装了基础的数据操作，如map，filter，reduce等。RDD提供数据共享的抽象，相比其他大数据处理框架，如MapReduce，Pegel，DryadLINQ和HIVE等均缺乏此特性，所以RDD更为通用。简要地概括RDD：RDD是一个不可修改的，分布的对象集合。每个RDD由多个分区组成，每个分区可以同时在集群中的不同节点上计算。RDD可以包含Python，Java和Scala中的任意对象。 Spark生态圈中应用都是基于RDD构建（下图），这一点充分说明RDD的抽象足够通用，可以描述大多数应用场景。 RDD操作类型—转换和动作 RDD的操作主要分两类：转换（transformation）和动作...

2017-10-11

674

原文链接： http://yangbingdong.com/2017/note-of-linux-command/ Preface =.= 这里只记录一些个人比较常用到的Ubuntu命令那些太基本以及太高深的就...... SSH相关保持长连接只需要在ssh命令后加上发送心跳即可： ssh -o ServerAliveInterval=30 root@123.456.88 -p 2333 生成SSH密钥和公钥打开终端，使用下面的ssh-keygen来生成RSA密钥和公钥。-t表示type，就是说要生成RSA加密的钥匙： ssh-keygen -t rsa -C "your_email@youremail.com" RSA也是默认的加密类型，所以你也可以只输入ssh-keygen，默认的RSA长度是2048位，如果你非常注重安全，那么可以指定4096位的长度： ssh-keygen -b 4096 -t rsa -C "your_email@youremail.com" 生成SSH Key的过程中会要求你指定一个文件来保存密钥，按Enter键使用默认的文件就行了，然后需要输入一个...

2017-10-11

628

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。