Die Abstimmung eines Basismodells in watsonx.ai ist ein iterativer Prozess. Sie führen ein Tuning-Experiment durch und werten dann die Ergebnisse aus. Falls erforderlich, ändern Sie die Versuchsvariablen und führen den Versuch wiederholt durch, bis Sie mit dem Ergebnis des abgestimmten Fundamentmodells zufrieden sind.
Überprüfen Sie Ihren Fortschritt nach jedem Experiment. Finden Sie eventuelle Einschränkungen in der Konfiguration Ihres Abstimmungsexperiments und beheben Sie diese, bevor Sie Ihre Trainingsdaten auf mögliche Probleme untersuchen.
Arbeitsablauf zur Verbesserung der Ergebnisse von Tuning-Experimenten
Es gibt nicht den einen richtigen Satz von Abstimmungsparametern oder Trainingsdatenbeispielen, die zu verwenden sind. Die besten Einstellungen für die Tuning-Parameter und die Größe des Datensatzes hängen von Ihren Daten, dem von Ihnen verwendeten Basismodell und der Art der Aufgabe ab, die das Modell erfüllen soll. Befolgen Sie diese Schritte, um Zeit zu sparen und beim Experimentieren den Überblick zu behalten.
Sie können das Tuning Studio verwenden, um diese Schritte auszuführen, oder Sie können Beispiel-Notizbücher verwenden, um sie programmatisch durchzuführen.
Bevor Sie mit Ihren Experimenten beginnen, erstellen oder bewahren Sie eine Teilmenge der Abstimmungs-Trainingsdaten auf, die Sie als Testdatensatz verwenden können.
Führen Sie ein Abstimmungsexperiment mit den Standardabstimmungsparametern durch.
Prüfen Sie die Verlustfunktion für den Experimentierlauf.
Das abgestimmte Modell ist gut, wenn die Verlustfunktion eine abwärts gerichtete Kurve aufweist, die sich in der Nähe von Null einpendelt.
Passen Sie gegebenenfalls die Parameterwerte an und wiederholen Sie das Experiment, bis sich die Verlustfunktion auf nahezu Null einpendelt.
Testen Sie die Qualität des abgestimmten Modells, indem Sie Prompts aus dem Testdatensatz übermitteln.
Falls erforderlich, überarbeiten oder ergänzen Sie die Trainingsdaten.
Wenn neue Daten eingeführt werden, sind möglicherweise weitere Optimierungen der Abstimmungsparameter möglich. Führen Sie das Experiment erneut durch und wiederholen Sie dann die Schritte in diesem Arbeitsablauf ab Schritt 3.
Übergeordnetes Thema: Tuning Studio