Grundkonzepte
Basismodell (Foundation Model)
Großes vortrainiertes Modell, das als Grundlage für viele Anwendungen dient.
Basismodelle werden in gewaltigem Umfang auf vielfältigen Daten trainiert und sind darauf ausgelegt, per Prompting oder Feinabstimmung an viele Aufgaben angepasst zu werden. Der Begriff betont, dass sie das Fundament bilden, auf dem spezialisierte KI-Systeme aufsetzen. Alle großen kommerziellen LLMs sind Basismodelle.
Verwandte Begriffe
LLM (Großes Sprachmodell)
Neuronales Netz, das auf riesigen Textmengen trainiert wurde, um natürliche Sprache zu erzeugen.
Vortraining (Pre-Training)
Die anfängliche, großskalige Trainingsphase, in der das Modell Sprache lernt.
Feinabstimmung (Fine-Tuning)
Ein vortrainiertes Modell mit fachspezifischen Daten weitertrainieren.
Instruction Tuning
Das Modell auf Paaren aus Anweisung und idealer Antwort trainieren, damit es Vorgaben befolgt.