TRANSFORMER — ARCHIVE
記録
01
TRANSFORMER
Transformer verstehen — Schritt 1: Tokenizer

Transformer aus Papier — Schritt 1: Der Tokenizer

Tokenizer Embedding Pos. …
2026.04.01
02
TRANSFORMER
Transformer verstehen — Schritt 1b: BPE (Byte Pair Encoding)

Schritt 1b: BPE — Byte Pair Encoding

Tokenizer (BPE) Embedding Pos. Encoding → …
2026.04.02
03
TRANSFORMER
Transformer verstehen — Schritt 2: Embedding

Schritt 2: Embedding — Zahlen bekommen Bedeutung

Tokenizer ✓ Embedding Pos. …
2026.04.03
04
TRANSFORMER
Transformer verstehen — Schritt 3: Positional Encoding

Schritt 3: Positional Encoding — Wo stehst du im Satz?

Tokenizer ✓ Embedding ✓ → …
2026.04.04
05
TRANSFORMER
Transformer verstehen — Schritt 4: Self-Attention

Schritt 4: Self-Attention — Das Herzstück

Tokenizer ✓ Embedding ✓ Pos. Encoding ✓ …
2026.04.05
06
TRANSFORMER
Transformer verstehen — Schritt 4b: Multi-Head & Masked Attention

Schritt 4b: Masked Attention & Multi-Head

Tokenizer ✓ Embedding ✓ Pos. Encoding ✓ …
2026.04.06
07
TRANSFORMER
Transformer verstehen — Schritt 5: Add & Norm + FFN

Schritt 5: Add & Norm + Feed-Forward Network

Tokenizer ✓ Embedding ✓ Pos. Enc. ✓ …
2026.04.07
08
TRANSFORMER
Transformer verstehen — Schritt 6: Die Output-Schicht

Schritt 6: Die Output-Schicht — Vom Vektor zum Wort

Tokenizer ✓ Embedding ✓ Pos. …
2026.04.08
09
TRANSFORMER
Transformer — Komplette Mathematik (Referenzblatt)

Transformer — Komplette Mathematik

Alle Formeln und Berechnungen für „Die Katze sitzt auf der Matte" …

2026.04.09