Attention Is All You Need
《Attention Is All You Need》是谷歌研究人员2017年发表的论文,首次提出了Transformer架构。
1篇文章
最近提及 《Attention Is All You Need》是谷歌研究人员于2017年发表的机器翻译论文,提出了不使用循环神经网络、仅依靠注意力机制处理文本的Transformer架构。
Transformer随后成为大语言模型等多数生成式AI模型的基础架构,这篇论文也被视为AI领域被引用最多的论文之一。
本条目依据AIPOST的文章与广为人知的事实整理。如有错误,请通过更正请求告诉我们。