Definitionen Künstliche Intelligenz – KI Glossar, Lexikon & Begriffe

Einfach erklärt Aufmerksamkeit ist eine Methode, mit der ein Modell bei jeder Vorhersage gezielt auf die wichtigsten Teile der Eingabe schaut. Statt alles gleich stark zu beachten, vergibt es Gewichte: Wichtige Wörter/Stellen zählen mehr, unwichtige weniger. So versteht das Modell Bezüge besser und trifft genauere Entscheidungen. Warum ist das nützlich? Einfache Beispiele: Professionelle Definition Gegeben…

Einfach erklärt Attention Masking bestimmt, welche Teile eines Textes ein Modell sehen darf und welche ausgeblendet werden. So vermeidet man, dass das Modell auf unsichtbare oder zukünftige Wörter schaut oder auf Füllzeichen (Padding) achtet. Kurz: Erlaubte Tokens sichtbar machen → verbotene Tokens ausblenden → saubere, sinnvolle Aufmerksamkeit. Ganz einfache Beispiele • Prüfung mit Sichtschutz: Bei…