这些深度学习术语,你了解多少?(下)
动量(Momentum)
Momentum是Gradient Descent算法的扩展、可加速或抑制参数更新。
多层感知器(MLP)
多层感知器是一种前馈神经网络,具有多个完全连接的层,使用非线性激活函数来处理不可线性分离的数据。MLP是多层神经网络的最基本形式,如果它超过2层,则是深度神经网络。
神经机器翻译(NMT)
NMT系统使用神经网络在不同语言之间进行翻译,例如英语和法语。NMT系统可以使用双语语料库进行端到端的训练,这与需要手工制作的特征的传统机器翻译系统不同。NMT系统通常使用编码器和解码器递在归神经网络来实现,该编码器和解码器分别是编码源句子和产生目标句子。
神经网络图灵机(NTM)
NMT