Museu do Google Read in English

Artigo acadêmico · IA e pesquisa

Attention Is All You Need, o artigo do Transformer (2017)

O artigo de Ashish Vaswani e mais sete autores propôs o Transformer, uma arquitetura de rede neural baseada só em mecanismos de atenção, sem recorrência nem convoluções. Em tradução de inglês para alemão, superou os melhores resultados da época em mais de 2 pontos BLEU; em inglês para francês, chegou a 41,8 BLEU depois de 3,5 dias de treino em oito GPUs.

Diagrama de autoatenção: a palavra it se liga a animal numa frase e a street na outra
Diagrama do blog do Google Research sobre o Transformer. Google, 31 de agosto de 2017 · Origem: Transformer: A Novel Neural Network Architecture for Language Understanding · Imagem de Google, exibida a partir do servidor original; não faz parte da licença CC BY 4.0 do museu.

12 de junho de 2017

Attention Is All You Need

Artigo acadêmico · IA e pesquisa · Ativo

fontes · linha do tempo 2015–2019

Reconstrução interpretativa · Material Design Convenções do Material Design (2014–2019): cartões com sombra sobre fundo cinza-claro, cores chapadas fortes e botão redondo flutuante. Não reproduz nenhuma página do Google.

Datas

  • 12 de junho de 2017 Publicação · data exata [1]

O que as fontes dizem

AfirmaçãoRegistroConfiançaFontes
Autores Vaswani, Shazeer, Parmar, Uszkoreit, Jones, Gomez, Kaiser e Polosukhin 2 · Fonte primária única [1] primária
Resultado em inglês–francês 41,8 BLEU, com 3,5 dias de treino em oito GPUs
Declaração		 2 · Fonte primária única [1] primária

O que significam os níveis de confiança

Nomes

  • Attention Is All You Need — nome oficial
  • Transformer — apelido de época

Capturas históricas

Ainda não há captura arquivada localizada para este registro.

Fontes

  1. Attention Is All You Need — Ashish Vaswani, Noam Shazeer, Niki Parmar, Jakob Uszkoreit, Llion Jones, Aidan N. Gomez, Lukasz Kaiser, Illia Polosukhin — arXiv, 12 de junho de 2017. Fonte primária · acessada em 2 de novembro de 2026 · em inglês · procurar cópia no Internet Archive

O que ainda falta documentar

  • Apresentação na conferência NeurIPS 2017
  • Fonte para a influência do Transformer em modelos posteriores

No GD

O GD acompanha o Google desde 2006. Buscar “Attention Is All You Need” no GD

Como citar

"Attention Is All You Need, o artigo do Transformer (2017)", Museu do Google (GD), https://gd.eurisko.com.br/museu/pt-br/acervo/attention-is-all-you-need-2017/, CC BY 4.0. Revisado em 2 de novembro de 2026.

ID: attention-is-all-you-need-2017 · Revisado em 2 de novembro de 2026