基于transformer的编码器-解码器模型是表征学习和模型架构这两个领域多年研究成果的结晶。本文简要介绍了神经编码器-解码器模型的历史，更多背景知识，建议读者阅读由SebastionRuder撰写的这篇精彩博文。此外，建议读者对自注意力(self-attention)架构有一个基本了解，可以阅读JayAlammar的这篇博文复习一下原始transformer模型。

本文分4个部分:

背景-简要回顾了神经编码器-解码器模型的历史，重点

转载请注明:http://www.aideyishus.com/lktp/7858.html