阿里妈妈基于TensorFlow做了哪些深度优化？TensorFlowRS架构解析-低调大师

阿里妈妈基于TensorFlow做了哪些深度优化？TensorFlowRS架构解析

2018-04-25 761 89

一．综述

深度学习比传统的逻辑回归有着更强的模型刻画能力，同时也带来了计算力百倍提升的需求。相比图像、语音、视频等领域，搜索、广告、推荐等场景有着独特的场景特点: 样本规模和特征空间通常非常巨大，千亿样本、百亿特征并不罕见，同时存在大量的稀疏特征作为Embedding输入。这就要求我们针对此场景下的计算特点对深度学习框架进行设计和优化。

本文所阐述的工作由阿里妈妈基础平台团队与PAI团队合作完成，我们基于TensorFlow在搜索、广告、推荐场景下进行了深度的优化与增强，内部项目名称为TensorFlowRS，主要的成果如下：

(1) 解决了原生TF水平扩展能力不足的问题。在我们的测试中，绝大多数搜索广告模型的训练性能提升在十倍以上，某些模型的极限性能最高可提升百倍。

(2) 支持完备的在线学习语义，模型变更实时写出；稀疏特征无需做连续

微信关注我们

原文链接：https://yq.aliyun.com/articles/585292

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

2018-04-26 00:00:00

国内数据库顶会DTCC 阿里数据库技术干货全面解析

如果你是一个技术人的话，就一定听过中国数据库技术大会（简称DTCC）。作为国内数据库及大数据领域规模最大、最受欢迎的技术交流盛会，云集了国内外顶尖专家，共同探讨MySQL、NoSQL、Oracle、缓存技术、云数据库、智能数据平台、大数据安全、大数据和开源、大数据创业、大数据深度学习等领域的前瞻性热点话题与技术。自2010年以来，迄今已成功举办了八届，累计参与人次达到20000+。 2018 年 5 月 10日，DTCC2018将如约而至。阿里数据库的核心团队将亮相此会，并与国内数据库专业人士交流过去9年在数据库领域的经验。一起来看看在DTCC2018上阿里数据库团队都给你准备了哪些你最关心的主题吧。 1、主题：深度解析云原生数据库POLARDB 直播时间：5月11日下午15:00 简介：什么是“云原生数据库”，云原生数据库的标准是什么，

655

2018-04-26 00:00:00

LeCun最新演讲：深度学习大革命来了，可微分编程潜力巨大

今天上午在北京举行的GMIC大会上，Facebook首席AI科学家Yann LeCun进行了主题演讲。他介绍了当前AI的一些最新进展，FAIR在计算机视觉、机器翻译等领域提出的一些最先进的架构。LeCun认为，监督学习不会被替代，但监督会不断减少，或者不断弱化。他强调了可微分编程的潜力，称未来还会出现更多的有关深度学习的变革，比如说更复杂的架构，同时也会出现更多的新理论。 Yann LeCun（杨立昆）首先介绍了今天的基于监督学习的AI系统。今天所有的应用，不管是影像、声音或者是图像的识别，或者一种语言翻译到另外一种语言，以及测试等等，都可以利用AI。通过深度学习我们可以训练机器，比如说向它展示一个车的图像，它就会知道这是一辆车，下次向机器展示同一个图像的话你就会得到你想要的答案。在这种监督下的学习对于计算机学习说是非常重要的。深度

585

资源下载

更多资源

优质分享Android(本站安卓app)

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Oracle Database，又名Oracle RDBMS

Oracle Database，又名Oracle RDBMS，或简称Oracle。是甲骨文公司的一款关系数据库管理系统。它是在数据库领域一直处于领先地位的产品。可以说Oracle数据库系统是目前世界上流行的关系数据库管理系统，系统可移植性好、使用方便、功能强，适用于各类大、中、小、微机环境。它是一种高效率、可靠性好的、适应高吞吐量的数据库方案。

Apache Tomcat7、8、9（Java Web服务器）

Tomcat是Apache 软件基金会（Apache Software Foundation）的Jakarta 项目中的一个核心项目，由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定，而且免费，因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可，成为目前比较流行的Web 应用服务器。

Eclipse（集成开发环境）

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。