北京云栖大会MaxCompute又出大招，Python UDF抢先体验!-低调大师

北京云栖大会MaxCompute又出大招，Python UDF抢先体验!

2017-12-19 619

2017/12/20 北京云栖大会上阿里云MaxCompute发布了最新的功能Python UDF。

小编第一时间申请到了公测资格，下面就为大家做个简单演示，通过DataWorks注册MaxCompute Python UDF（字符串大小写转换），完成数据处理。

前提条件：

1、申请开通https://page.aliyun.com/form/odps_py/pc/index.htm

注意：公测阶段请使用测试Project，不要使用生产Project。

2、开通MaxCompute/Dataworks。

3、Python 脚本，test_udf.py。实现方法请参考Python实现MaxCompute UDF

# -*- coding:utf-8 -*-
from odps.udf import annotate #函数签名，SQL执行前所有

微信关注我们

原文链接：https://yq.aliyun.com/articles/300307

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

spark 计算结果写入mysql 案例及常见问题解决

package com.jxd import org.apache.spark.SparkContextimport org.apache.spark.SparkConfimport java.sql.Connectionimport java.sql.DriverManagerobject hello { def main(args: Array[String]): Unit = { var conf = new SparkConf().setAppName("Hello World") var sc = new SparkContext(conf) var input = sc.textFile("test/hello", 2) var count = input.flatMap(name => name.split(" ")).map((_, 1)).reduceByKey(((a, b) => a + b)) count.foreachPartition(insertToMysql) } def insertToMysql(iterator: Iterator[(S...

2017-12-20

460

95.4. zabbix-agent

95.4.1.Ubuntu # sudo apt-get install zabbix-agent /etc/zabbix/zabbix_agent.conf #Server=localhost Server=your_server_ip_address # vim /etc/services zabbix-agent 10050/tcp #Zabbix Agent zabbix-agent 10050/udp #Zabbix Agent # sudo /etc/init.d/zabbix-agent restart 95.4.2.CentOS 7 yum localinstall -y http://repo.zabbix.com/zabbix/3.2/rhel/7/x86_64/zabbix-release-3.2-1.el7.noarch.rpm yum install -y zabbix-agent cp /etc/zabbix/zabbix_agentd.conf{,.original} sed -i "s/# SourceIP=/SourceIP=zabbix_server...

2017-12-21

525

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Apache Tomcat

Tomcat是Apache 软件基金会（Apache Software Foundation）的Jakarta 项目中的一个核心项目，由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定，而且免费，因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可，成为目前比较流行的Web 应用服务器。

Eclipse

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。

JDK

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。