开源深度学习库BigDL在阿里云E-MapReduce上的实践

近些年来机器学习中的子领域深度学习成为一个热门的话题，特别是在围棋领域，谷歌的AlphaGo也使用了深度学习的技术。

在大数据领域，Spark MLlib是一个很流行的机器学习算法库，如果你想用Spark来做深度学习训练，MLlib还无法很好的支持。本文要介绍Intel开源的深度学习框架BigDL，他也是在Spark上的一个算法库，提供了全面的深度学习算法支持，包括数值计算（Tensor）和高阶神经网络等。

因为BigDL是在Spark上运行的，借助Spark平台的分布式扩展性，可以方便的扩展到上百或上千个节点。同时BigDL利用了Intel MKL等先进的数学计算库，基于Intel CPU计算能力可能取得媲美GPU的性能。

BigDL的使用场景

BigDL可能使用在下列场景中：

1. 直接在Hadoop或Spark平台上使用深度学习进行大数据分