Generative KI und Sprachmodelle
Fine-Tuning
Fine-Tuning bedeutet, ein bereits vortrainiertes KI-Modell mit zusätzlichen, spezialisierten Daten weiterzutrainieren, damit es sich auf eine bestimmte Aufgabe oder Domäne einstellt.
Für dein Unternehmen
Für die meisten Mittelständler ist Retrieval-Augmented Generation der einfachere und günstigere erste Schritt zur Individualisierung; Fine-Tuning lohnt sich meist erst bei sehr spezifischem Sprachstil oder hohem, wiederkehrendem Anfragevolumen.
IT, F&E
Ausführliche Definition
Beim Fine-Tuning wird ein vortrainiertes Foundation Model mit einem kleineren, spezialisierten Datensatz weitertrainiert, etwa mit den eigenen Support-Tickets eines Unternehmens, um es an einen bestimmten Tonfall, ein Fachgebiet oder eine Aufgabe anzupassen. Es ist deutlich günstiger als ein komplett neues Modell zu trainieren, erfordert aber dennoch technisches Know-how und qualitativ gute Trainingsdaten.
foundation-model; retrieval-augmented-generation; trainingsdaten
Generative KI ist Chain-of-Thought Prompting Elicits Reasoning in Large Language Models | Wei et al., Google Research, NeurIPS, 2022 (arXiv:2201.11903)
← Alle Begriffe im KI-Glossar


