AttentionArchitekturAttention MechanismMechanismus, mit dem ein Modell relevante Teile des Kontexts unterschiedlich stark gewichtet.PraxisHilft bei Kontextverständnis, Sprachverarbeitung und multimodalen Aufgaben.Self-Attention, Cross-AttentionAufmerksamkeit
FMModelleFoundation ModelBreit vortrainiertes Basismodell, das für viele Aufgaben adaptiert werden kann.PraxisFoundation Models bilden die Basis vieler spezialisierter KI-Anwendungen.LLM, Bildmodell, multimodales ModellBasismodell