---
title: "Transformeur (Transformer)"
description: "Le Transformeur (Transformer) est une architecture de réseau de neurones introduite en 2017, fondée sur le mécanisme d’attention (self-attention), qui permet au modèle de pondérer l’importance de chaque mot par rapport aux autres. C’est la base de tous les grands modèles de langage modernes et de BERT. Le mécanisme d’attention Au lieu de traiter le […]"
url: "https://www.newp.fr/lexique/transformeur/"
author: "Kévin Papot"
date: "2026-07-29T14:01:06+00:00"
modified: "2026-07-29T14:49:09+00:00"
lang: "fr_FR"
---

# Transformeur (Transformer)

Le **Transformeur** (*Transformer*) est une architecture de réseau de neurones introduite en 2017, fondée sur le mécanisme d'attention (*self-attention*), qui permet au modèle de pondérer l'importance de chaque mot par rapport aux autres. C'est la base de tous les grands modèles de langage modernes et de BERT.

## Le mécanisme d'attention

Au lieu de traiter le texte mot à mot de façon séquentielle, le Transformer analyse toute la phrase en parallèle et calcule quelles relations comptent : c'est ce qui lui donne sa compréhension fine du contexte.

## Pourquoi c'est fondateur

La parallélisation (entraînement à grande échelle) et la gestion d'un contexte long expliquent le saut de performance à l'origine de la vague d'IA générative. Sans Transformer, pas de [LLM](/lexique/llm/) ni de [traitement du langage naturel](/lexique/nlp/) moderne.

## Questions fréquentes

### Qui a inventé le Transformer ?

Des chercheurs de Google, dans l'article « Attention is All You Need » (2017).

### Quel lien entre Transformer et GPT ?

Le « T » de GPT signifie Transformer.

### BERT est-il un Transformer ?

Oui : BERT en est une variante bidirectionnelle.

## Termes liés

- [LLM](/lexique/llm/)
- [NLP](/lexique/nlp/)
- [Intelligence artificielle générale](/lexique/intelligence-artificielle-generale/)
- [Histoire de l'intelligence artificielle](/lexique/histoire-intelligence-artificielle/)
- [BERT](/lexique/bert/)

---

*Par [**Kévin Papot**](/consultant-seo/), consultant SEO & GEO et auteur de quatre ouvrages sur le référencement, dont « GEO. Devenir n°1 sur ChatGPT ».*

{"@context":"https://schema.org","@graph":\[{"@type":"DefinedTerm","name":"Transformeur","description":"Architecture de réseau de neurones (2017) fondée sur le mécanisme d'attention, à la base des grands modèles de langage modernes et de BERT.","inDefinedTermSet":"https://www.newp.fr/lexique/"},{"@type":"FAQPage","mainEntity":\[{"@type":"Question","name":"Qui a inventé le Transformer ?","acceptedAnswer":{"@type":"Answer","text":"Des chercheurs de Google, dans l'article « Attention is All You Need » (2017)."}},{"@type":"Question","name":"Quel lien entre Transformer et GPT ?","acceptedAnswer":{"@type":"Answer","text":"Le « T » de GPT signifie Transformer."}},{"@type":"Question","name":"BERT est-il un Transformer ?","acceptedAnswer":{"@type":"Answer","text":"Oui : BERT en est une variante bidirectionnelle."}}\]}\]}

---

*Source : [www.newp.fr](https://www.newp.fr/lexique/transformeur/)*