AI学习笔记——End-to-End(端到端)的深度学习
1. 什么是End-to-End 学习
要知道什么是End-to-End学习首先要知道传统的非End-to-End学习是什么。以语义分类(判断评论为正面评论还是负面评论)为例,非End-to-End的学习需要对语音识别之前要经过两步处理:解析器(Parser) 注释文本和情感分类器(Sentiment Classifier)预测文本。
解析器是对文本进行标注,比如形容词(好,坏,糟糕等),情感分类器再来预测文本是正面的还是负面的,整个过程如图:
End-to-End 学习不需要这些步骤,像黑盒子一样一步到位解决问题。神经网络算法就是一个被广泛应用的End-to-End学习的算法。End-to-End 算法尤其适用于数据量巨大的机器学习任务中。
2. 更多End-to-End 的例子
在语音识别领域,非End-to-End 的学习大致经历:计算特征解析得到人工设计的频谱特征,音素(Phonemes)识别器识别语音中的“音素”和最终识别三个步骤:
然而End-to-End 也只需要一步就搞定了
3. End-to-End 学习的优缺点
非End-to-End的学习算法中,需要人类做大量的前期准备工作,比如在上述语音识别的例子中,"音素"是语言学家发明的,在处理过程虽然提高了效率但是无疑会丢失语音中的其他信息。但是这种算法需要的数据量比较小。
End-to-End学习算法虽然不需要太多的人工干预,但是需要大量标记的数据,并不是在所有领域都是最好的选择。
4.非End-to-End 学习算法中pipline(管道)的选择
正如上文提到的,End-to-End的学习方法并不是在所有的领域都是最好的选择。最重要的是到底有没有足够可靠的数据。以自动驾驶为例,通过摄像头识别人和车辆,然后规划驾驶路径。如果用End-to-End的方法,需要积累海量量标记好的数据,各种路况不同的路径规划,非常困难。
然而,如果使用非End-to-End的方法,比如下图,先识别车和人,再进行路径规划
人和车的被标记好的数据很容易找到,完成这一步,再进行路径规划,这样训练起来就容易很多了。而这样设计算法的步骤就是pipline.
再举一个识别图片中猫的品种的例子,我们可以这样设计Pipline: 第一步先识别图片中是否有猫,第二步再识别猫是不是这个品种:
————
相关文章
AI学习笔记——循环神经网络(RNN)的基本概念
AI学习笔记——神经网络和深度学习
AI学习笔记——卷积神经网络1(CNN)
————
文章首发steemit.com 为了方便墙内阅读,搬运至此,欢迎留言或者访问 我的Steemit主页
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
今日科技联播:中国团队夺得MegaFace百万人脸识别冠军,精度99%再创记录
一场脸对脸的较量,中国团队获MegaFace百万人脸识别冠军,一不小心就破了世界纪录!创可贴也越来越智能了,内置处理器可随时跟踪你的伤口情况;山东破获特大公民个人信息案,11家公司日均贩卖一亿三千万余条信息,你的个人信息被窃取了吗?一起来看看今天的科技头条吧! 刷新世界纪录,图普科技夺MegaFace百万级人脸识别冠军 图普科技在国际权威海量人脸识别数据库MegaFace中,以99.087%的最新成绩在百万级别人脸识别测试中拔得头筹,参加这项测试的还有来自Google、微软中国、百度、腾讯等公司的AI团队。与知名的人脸识别评测LFW数据库侧重于对比两张人脸照片是否具有相同身份不同,MegaFace以海量人脸注册情况下的识别率为重要指标,难度更大。 工业和信息化部与德国签署《关于自动网联驾驶领域合作的联合意向声明》 当地时间2018年7月9
- 下一篇
极课大数据:培养超级学生,不如打造超级教师
本文是阿里云创新中心“创业明星系列”第6期 “互联网+”的热潮还未退尽,“人工智能+”的浪潮已经开始涌来。本期阿里云创新中心的创业明星,就是在“人工智能+教育”赛道上的一位先行者…… 随着中国经济实力和科研力量的不断增强,大数据的应用以其精准、高效的特点,成为教育行业在DT时代的全新推动力。 从2014年开始,极课大数据就在 K12 阶段大数据精准教学服务上发力,成为了全国智慧教育示范企业。 与教育领域内其他注重课后教育的公司不同,极课大数据一开始就将核心应用场景锁定在了教师端。在传统的教育行业,教师每天需要投入大量的时间进行作业批改,而以教学能力为核心的教育从业者需要较高专业性,加之由于教师风格的不同,教学课程很难标准化,教育经验传递效率普遍偏低。因此,从企业创办一开始,极课大数据产品关注的问题就在于:如何利用大数据和人工智能提高教
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- CentOS8编译安装MySQL8.0.19
- Springboot2将连接池hikari替换为druid,体验最强大的数据库连接池
- Linux系统CentOS6、CentOS7手动修改IP地址
- CentOS8安装Docker,最新的服务器搭配容器使用
- SpringBoot2全家桶,快速入门学习开发网站教程
- Docker安装Oracle12C,快速搭建Oracle学习环境
- Docker快速安装Oracle11G,搭建oracle11g学习环境
- Jdk安装(Linux,MacOS,Windows),包含三大操作系统的最全安装
- SpringBoot2配置默认Tomcat设置,开启更多高级功能
- CentOS7,8上快速安装Gitea,搭建Git服务器