使用Airflow调度MaxCompute
一、环境准备 • Python 2.7.5 PyODPS支持Python2.6以上版本• Airflow apache-airflow-1.10.71.安装MaxCompute需要的包 pip install setuptools>=3.0 pip install requests>=2.4.0 pip install greenlet>=0.4.10 # 可选,安装后能加速Tunnel上传。 pip install cython>=0.19.0 # 可选,不建议Windows用户安装。 pip install pyodps 注意:如果requests包冲突,先卸载再安装对应的版本2.执行如下命令检查安装是否成功 python -c "from odps import ODPS" 二、开发步骤 1.在Airflow家目录编写python调度脚本Airiflow_MC.py #-*- coding: UTF-8 -*- import sys from odps import ODPS from odps import options from airflow im...