Was bedeutet Fine-Tuning?
Fine-Tuning ist die weitere Anpassung eines bereits trainierten Modells durch zusätzliches Training. Dabei werden Modellparameter für gewünschte Aufgaben oder Verhaltensweisen verändert. Es ist von bloßen Beispieleingaben und vom Abruf externer Quellen zu unterscheiden.
Was heißt das für Public Affairs?
Es kann etwa für wiederkehrende Fachklassifikationen geprüft werden, wenn geeignete Trainings- und Testdaten vorhanden sind. Zunächst sollte untersucht werden, ob eine klarere Arbeitsanweisung oder eine bessere Dokumentensuche die Aufgabe bereits ausreichend löst.
Worauf kommt es an?
Fine-Tuning ist kein verlässlicher Ersatz für eine laufend aktualisierte Wissensbasis. Auch nach Anpassung müssen Fehler, Datenschutz, Berechtigungen und Modellverhalten überprüft werden.
Drei Fragen für die Praxis
- Welche Verbesserung wird angestrebt?
- Sind die Trainingsdaten geeignet?
- Wie wird unabhängig gegen die Ausgangsversion getestet?
Originalquellen & Vertiefung
Die Quellen erläutern den Begriff oder seinen fachlichen Rahmen. Die Anwendungshinweise und das fiktive Beispiel sind eigenständige Ausarbeitungen dieses Glossars.
- Hugging Face: LLM Course – Fine-tuning a pretrained model
- Brown et al. (2020): Language Models are Few-Shot Learners
Fachbegriffe werden verständlich eingeordnet; berufliche Arbeitsbegriffe sind keine gesetzlichen Definitionen. Bei Rechtsfragen sind die einschlägige Fassung und der konkrete Einsatz maßgeblich.