大规模深度学习优化技术在PAI平台中的应用及实践-低调大师

大规模深度学习优化技术在PAI平台中的应用及实践

2017-03-28 545

1. 前言

自2012年Deep Learning的代表模型AlexNet在ImageNet大赛中力压亚军，以超过10个百分点的绝对优势夺得头筹之后，依托于建模技术的进步、硬件计算能力的提升、优化技术的进步以及海量数据的累积，Deep Learning在语音、图像以及文本等多个领域不断推进，相较于传统作法取得了显著的效果提升。

工业界和学术界也先后推出了用于Deep Learning建模用途的开源工具和框架，包括Caffe、Theano、Torch、MXNet、TensorFlow、Chainer、CNTK等等。其中MXNet、TensorFlow以及CNTK均对于训练过程提供了多机分布式支持，在相当大程度上解放了DL建模同学的生产力。

但是，DL领域的建模技术突飞猛进，模型复杂度也不断增加。从模型的深度来看，以图像识别领域为例，1

微信关注我们

原文链接：https://yq.aliyun.com/articles/72845

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

【图文】云栖大会深圳峰会：阿里云ET医疗大脑与工业大脑，机器学习平台PAI2.0

阿里云新征程：通往智能之路！正式发布ET工业大脑，ET医疗大脑和机器学习平台PAI2.0，阿里云的目标是成为万物智能化的基础设施和智能引擎！ 2017年3月27日至29日，云栖大会于深圳举行。29日为大会主论坛，27日至28日为技术论坛和行业分论坛。直播地址： https://yunqi.aliyun.com（所有主会演讲都可观看） 29日清晨，深圳会场外的主持人就随机采访了场外观众，其中有来自企业的CIO和CTO，也有系统集成商等合作伙伴，大家均表示希望通过参加云栖大会了解最新技术趋势，学习行业云计算实践经验。主会场外，面对新的人脸识别通道，大家兴趣满满。【09:00】阿里巴巴集团资深副总裁、阿里云总裁胡晓明在题为《通往智能之路》的演讲中，有若干精彩观点：这段时间我们非常开心。飞天不仅在中国，而且在全球如日本、迪拜、欧洲、美国东部和西部都开设了数据中心业务，为全球用户提供云计算服务。国际客户更多开始使用阿里云计算服务。日本资生堂、泰国电信、日本丰田等都开始使用阿里云飞天技术。我们看到：海外业务呈现了比中国本土业务更快的增长速度。曾经我们想一个企业在阿里云上消费100万已经是非常大...

2017-03-29

774

今天，在微信公开课深圳站小程序专场上，微信团队不仅对近期上线的小程序新能力进行解读，也再次阐述小程序的服务场景，并带来了两项全新的能力：“第三方平台”和“附近的小程序”。（微信公开课讲师黄天晴）一、小程序将上线两大能力 1、第三方平台在小程序面向个人开发者开放之后，小程序的开发门槛将进一步降低。对于一些没有开发能力的商户，现在会有一些第三方帮助他们去开发，但是也会有一些问题。比如商户会担心他的帐号密码丢失，第三方也不好管理他的管理代码。“第三方平台”开放后，可以让商户的小程序开发更省心，也方便第三方批量管理商户。 2、附近的小程序在基础的搜索、扫码等方式上，我们希望可以提供多维度的渠道，让用户更方便地发现小程序。通过“附近的小程序”，用户可以在微信中快速找到附近的小程序和服务，同时也能够帮助线下商户更直接地触达用户，让小程序融入更多生活场景。二、对小程序的两个思考 1、通过提升用户体验转化能量小程序和公众号并不是对立面，重要的是可以转化，希望大家把更多的精力跟焦点放在做好体验跟服务上，甚至把所有的目光转移到用户身上，从用户需求出发，把这个需求满足好，微信其实也会...

2017-03-30

633

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。