Transformer-Komponente
Key (K)
Key (K) ist ein Begriff aus dem Bereich Transformer-Komponente: ein Vektor, der die Eigenschaften und den semantischen Inhalt eines Tokens als Antwortangebot für Queries repräsentiert.
Mechanismus
Ein Vektor, der die Eigenschaften und den semantischen Inhalt eines Tokens als Antwortangebot für Queries repräsentiert.
Implikation
Bestimmt über das Skalarprodukt mit der Query, wie viel Aufmerksamkeit ein anderes Wort der Sequenz erhält.
Ausführliche Erklärung
Verwandte Begriffe
Artikel zu diesem Begriff
Aktuell sind keine Artikel zu diesem Begriff verknüpft.