Parametr

Parameter sind Zahlen, die das Modell während des Trainings justiert - man kann sie sich wie Millionen winziger Stellschrauben vorstellen, deren Einstellung das Verhalten des Netzes bestimmt. Die Modellgröße wird genau in Parametern angegeben: Milliarden (B) sind heute Standard, die größten Modelle haben Hunderte Milliarden. Mehr Parameter bedeuten meist größere Möglichkeiten, aber auch höhere Betriebskosten und langsamere Antworten. Deshalb werden neben Giganten auch kleine, spezialisierte Modelle entwickelt, die bei einem Bruchteil der Größe erstaunlich gute Ergebnisse in konkreten Aufgaben erzielen.