MaxCompute Studio使用心得系列6——一个工具完成整个Python UDF开发-低调大师

MaxCompute Studio使用心得系列6——一个工具完成整个Python UDF开发

2017-12-20 513 89

2017/12/20 北京云栖大会上阿里云MaxCompute发布了最新的功能Python UDF，万众期待的功能终于支持啦，我怎么能不一试为快，今天就分享如何通过Studio进行Python udf开发。

前置条件

了解到，虽然功能发布，不过还在公测阶段，如果想要使用，还得申请开通：https://page.aliyun.com/form/odps_py/pc/index.htm。这里我就不介绍申请开通具体流程了。

环境准备

MaxCompute Studio支持Python UDF开发，前提需要安装python, pyodps和idea的python插件。

安装Python：可以Google或者百度搜索下如何安装。
安装pyodps：可以参考python sdk文档的安装步骤。即，在 Python 2.6 以上（包括 Python 3），

微信关注我们

原文链接：https://yq.aliyun.com/articles/304646

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

2017-12-21 00:00:00

141.7. FAQ

141.7.1.hadoop-1.1.2-1.x86_64.rpm 包含哪些文件内容查看安装文件 # rpm -ql hadoop-1.1.2-1 141.7.2.启动 Hadoop 后 9000 端口不存在首先通过 jps 排查 NameNode 是否存在 [hadoop@netkiller apache-hadoop]$ jps 23345 NodeManager 23042 SecondaryNameNode 11076 Jps 22860 DataNode 23228 ResourceManager 检查 hdfs 目录 [hadoop@netkiller ~]$ find /opt/hadoop/volume/ /opt/hadoop/volume/ /opt/hadoop/volume/datanode /opt/hadoop/volume/namenode 故障是 hdfs 目录没有初始化，初始化 hdfs 后重启 hadoop 即可解决 [hadoop@netkiller apache-hadoop]$ bin/hdfs namenode -format [hado...

526

2017-12-21 00:00:00

熊猫直播：大视频数据业务的云上历程

在海量数据的大视频行业，如何满足大数据需求？12月20日举办的北京云栖大会“企业云上业务优化”分论坛上，熊猫直播大数据技术专家卢圣刚，分享了熊猫直播不断优化云上资源，建立起灵活配置、高扩展性、易于运维的云上架构的宝贵经验。作为知名泛娱乐直播平台，熊猫直播涵盖游戏、娱乐、综艺、户外、体育等多种泛娱乐直播内容。在身处大视频时代的当下，熊猫直播代表了众多大视频企业的大数据需求：面对分散在MySQL、Redis、MongoDB之中的数据源头，需要实现统一的数据存储；面对不同的业务场景和高速的业务发展，需要实现灵活的横向扩展——不仅能灵活添加开源组建，还需要能快速增加计算节点。作为高速发展的直播平台，熊猫直播数据纬度多、数据量巨大——累计已经达到PB级，仅仅每天新增的就有几十T。就离线计算的数据量看，每天几百个日常计算任务，以及大量的临时查

646

资源下载

更多资源

Mario，低调大师唯一一个Java游戏作品

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Eclipse（集成开发环境）

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。

Java Development Kit(Java开发工具)

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。

Sublime Text 一个代码编辑器

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。