Schnelleinstieg: Eingabeaufforderungsvorlage auswerten und verfolgen

Um eine Vorschau dieser Task anzuzeigen, sehen Sie sich das Video ab 00:09an.

Ein Modellbestand dient zum Speichern und Prüfen von KI-Anwendungsfällen. KI-Anwendungsfälle erfassen Governance-Fakten für KI-Assets, die Ihr Unternehmen verfolgt. Sie können alle KI-Anwendungsfälle in einem Bestand anzeigen.

Um eine Vorschau dieser Task anzuzeigen, sehen Sie sich das Video ab 00:51an.

Sie benötigen ein Projekt zum Speichern der Eingabeaufforderungsvorlage und der Auswertung. Wenn Sie das Projekt bereits erstellt haben, überspringen Sie Schritt 1 in dieser Task und ordnen Sie dann den Service Watson Machine Learning dem Beispielprojekt zu. Führen Sie andernfalls die folgenden Schritte aus, um ein Projekt auf der Basis eines Beispiels zu erstellen:

1. Greifen Sie auf das Projekt Getting started with watsonx governance im Ressourcenhub zu.

   1. Klicken Sie auf Projekt erstellen.

   2. Akzeptieren Sie die Standardwerte für den Projektnamen und klicken Sie auf Erstellen.

   3. Klicken Sie auf Neues Projekt anzeigen , wenn das Projekt erfolgreich erstellt wurde.

2. Ordnen Sie dem Projekt einen Watson Machine Learning Service zu. Weitere Informationen finden Sie unter Watson Machine Learning.

   1. Wenn das Projekt geöffnet wird, klicken Sie auf die Registerkarte Verwalten und wählen Sie die Seite Services und Integrationen .

   2. Klicken Sie auf der Registerkarte IBM -Services auf Service zuordnen.

   3. Wählen Sie Ihre Watson Machine Learning -Instanz aus. Wenn Sie noch keine Serviceinstanz von Watson Machine Learning bereitgestellt haben, führen Sie die folgenden Schritte durch:

      1. Klicken Sie auf Neuer Service.

      2. Wählen Sie Watson Machine Learningaus.

      3. Klicken Sie auf Erstellen.

      4. Wählen Sie die neue Serviceinstanz aus der Liste aus.

   4. Klicken Sie auf Service zuordnen.

   5. Klicken Sie bei Bedarf auf Abbrechen , um zur Seite Services & Integrationen zurückzukehren.

3. Klicken Sie auf die Registerkarte Assets im Projekt, um die Beispielassets anzuzeigen.

Weitere Informationen hierzu oder die Option zum Ansehen eines entsprechenden Videos finden Sie unter Projekt erstellen.

Weitere Informationen zu zugehörigen Services finden Sie unter Zugehörige Services hinzufügen.

Um eine Vorschau dieser Task anzuzeigen, sehen Sie sich das Video ab 01:28an.

Das Beispielprojekt enthält einige Eingabeaufforderungsvorlagen und CSV-Dateien, die als Testdaten verwendet werden. Führen Sie die folgenden Schritte aus, um die Testdaten herunterzuladen und eine der Beispielvorlagen für Eingabeaufforderungen auszuwerten:

1. Laden Sie die Testdaten aus dem Beispielprojekt herunter. Sie müssen während der Auswertung eine lokale Datei für die Testdaten bereitstellen.

   1. Klicken Sie auf die Registerkarte Assets.
   2. Klicken Sie für die Datei Insurance claim summarization test data.csv auf das Menü Überlauf und wählen Sie Herunterladenaus.
   3. Speichern Sie die CSV-Datei lokal.

2. Klicken Sie auf Zusammenfassung von Versicherungsansprüchen , um die Eingabeaufforderungsvorlage in Prompt Lab zu öffnen, und klicken Sie anschließend auf Bearbeiten.

3. Klicken Sie auf das Symbol Variablen für Eingabeaufforderung .

   Hinweis: Zum Ausführen von Auswertungen müssen Sie mindestens eine Eingabeaufforderungsvariable erstellen.

4. Blättern Sie zum Abschnitt Try . Beachten Sie die Variable {input} im Feld Eingabe . Sie müssen die Eingabeaufforderungsvariable als Eingabe zum Testen Ihrer Eingabeaufforderung einschließen. Eine Eingabeaufforderungsvariable ist ein Platzhalterschlüsselwort, das Sie bei der Erstellung in den statischen Text Ihrer Eingabeaufforderung einschließen und zur Laufzeit dynamisch durch Text ersetzen.

5. Klicken Sie auf das Symbol Auswerten .

6. Erweitern Sie den Abschnitt Generative AI Quality , um eine Liste der Bemaßungen anzuzeigen. Die verfügbaren Metriken hängen vom Tasktyp der Eingabeaufforderung ab. Die Zusammenfassung hat beispielsweise andere Metriken als die Klassifikation.

7. Klicken Sie auf Weiter.

8. Testdaten auswählen:

   1. Klicken Sie auf Durchsuchen.
   2. Wählen Sie die Datei Insurance claim summarization test data.csv aus, die Sie zuvor heruntergeladen haben.
   3. Klicken Sie auf Öffnen.
   4. Wählen Sie für die Eingabespalte Insurance_Claimaus.
   5. Wählen Sie für die Referenzausgabespalte Zusammenfassungaus.
   6. Klicken Sie auf Weiter.

9. Klicken Sie auf Evaluate. Die Auswertung kann einige Minuten dauern. Nach Abschluss der Auswertung werden die Testergebnisse auf der Registerkarte Auswerten angezeigt. Auf dieser Seite werden detaillierte Informationen zu diesem Auswertungslauf angezeigt, damit Sie Einblicke in Ihre Modellleistung gewinnen können. Die Zusammenfassung bietet einen Überblick über Metrikbewertungen und Verstöße gegen Standardbewertungsschwellenwerte für Ihre Eingabeaufforderungsvorlagenauswertungen.

10. Klicken Sie auf die Registerkarte AI Factsheet .

    1. Zeigen Sie die Informationen zu jedem Abschnitt auf der Registerkarte an.
    2. Klicken Sie auf Bewertung > Entwickeln > Test , um die Testergebnisse erneut anzuzeigen.

Um eine Vorschau dieser Task anzuzeigen, sehen Sie sich das Video ab 02:37an.

Sie können Ihre Eingabeaufforderungsvorlage in einem KI-Anwendungsfall verfolgen, um den Entwicklungs-und Testprozess an Ihre Peers zu berichten. Führen Sie die folgenden Schritte aus, um die Verfolgung der Eingabeaufforderungsvorlage zu starten:

1. Wählen Sie im Navigationsmenü Projekte > Alle Projekte anzeigenaus.
2. Wählen Sie das Projekt Einführung in watsonx Governance aus.
3. Klicken Sie auf die Registerkarte Assets.
4. Wählen Sie im Menü Überlauf für die Eingabeaufforderungsvorlage Zusammenfassung von Versicherungsansprüchen die Option Zum KI-Factsheet wechseln. Jedes KI-Asset verfügt über ein KI-Factsheet, das detaillierte Informationen zur Erstellung des Assets, seine Bewertungsergebnisse während des gesamten KI-Lebenszyklus und weitere Anhänge enthält.
5. Klicken Sie auf der Registerkarte AI Factsheet auf die Seite Governance .
6. Klicken Sie auf KI-Anwendungsfall verfolgen.
7. Wählen Sie den Anwendungsfall 'Insurance claims processing AI'aus.
8. Klicken Sie auf Weiter.
9. Wählen Sie eine Methode aus. Ein Ansatz ist eine Facette der Lösung für das Geschäftsproblem, das durch den KI-Anwendungsfall dargestellt wird. Sie können beispielsweise Ansätze zum Verfolgen mehrerer Eingabeaufforderungsvorlagen in einem Anwendungsfall erstellen.
10. Klicken Sie auf Weiter.
11. Wählen Sie als Modellversion Experimentellaus.
12. Akzeptieren Sie den Standardwert für die Versionsnummer.
13. Klicken Sie auf Weiter.
14. Überprüfen Sie die Informationen und klicken Sie dann auf Asset verfolgen.
15. Wenn die Modellverfolgung erfolgreich beginnt, klicken Sie auf das Symbol Details anzeigen , um den KI-Anwendungsfall zu öffnen.
16. Klicken Sie auf die Registerkarte Lebenszyklus , um anzuzeigen, dass sich die Eingabeaufforderungsvorlage in der Phase Entwickeln befindet. Während die Eingabeaufforderungsvorlage den KI-Lebenszyklus durchläuft, durchläuft sie die folgenden Phasen:
    • Entwicklungsphase : KI-Assets, die in einer Projektumgebung entwickelt wurden
    • Testphase : ML-Modelle, die zum Testen in einem Bereich bereitgestellt wurden.
    • Phase Validieren : KI-Assets, die zur Validierung in einem Bereich oder Projekt bereitgestellt wurden
    • Phase Betrieb : KI-Assets, die in einem Bereich für den Betrieb bereitgestellt werden

Um eine Vorschau dieser Task anzuzeigen, sehen Sie sich das Video ab 03:27an.

In der Regel wertet der Eingabeaufforderungsentwickler die Eingabeaufforderung mit Testdaten aus und der Validierungsentwickler validiert die Eingabeaufforderung. Der Validierungsentwickler hat Zugriff auf die Validierungsdaten, die den Entwicklern möglicherweise nicht zur Verfügung stehen. In diesem Fall treten Validierungsdaten in einem anderen Projekt auf. Führen Sie die folgenden Schritte aus, um das Entwicklungsprojekt zu exportieren und als neues Validierungsprojekt zu importieren, um das Asset in die Validierungsphase des KI-Lebenszyklus zu verschieben:

1. Wählen Sie im Navigationsmenü Projekte > Alle Projekte anzeigenaus.

2. Wählen Sie das Projekt Einführung in watsonx Governance aus.

3. Klicken Sie auf das Symbol Importieren/Exportieren > Projekt exportieren.

4. Aktivieren Sie das Kontrollkästchen, um alle Assets auszuwählen.

5. Kopieren Sie als Projektnamen den folgenden Text und fügen Sie ihn ein. Klicken Sie dann auf Speichern.

   validation project.zip
   ```1. Click **Export**.
   

6. Klicken Sie nach Abschluss des Projektexports auf Zurück zum Projekt.

7. Wählen Sie im Navigationsmenü Projekte > Alle Projekte anzeigenaus.

8. Klicken Sie auf Neues Projekt.

9. Wählen Sie Lokale Dateiaus.

   1. Klicken Sie auf Durchsuchen.

   2. Wählen Sie validation project.zipaus und klicken Sie auf Open.

   3. Kopieren Sie für den Projektnamen den folgenden Text und fügen Sie ihn ein:

      Validation project
      

   4. Klicken Sie auf Erstellen.

10. Klicken Sie nach der Erstellung des Projekts auf View new project.1. Führen Sie dieselben Schritte wie in Schritt 1 aus, um Ihren Service Watson Machine Learning diesem Projekt zuzuordnen.

Um eine Vorschau dieser Task anzuzeigen, sehen Sie sich das Video ab 04:22an.

Jetzt können Sie die Eingabeaufforderungsvorlage in diesem Validierungsprojekt mit demselben Bewertungsprozess wie zuvor auswerten. Verwenden Sie dasselbe Testdataset für die Auswertung. Wählen Sie dieselben Ein-und Ausgabespalten wie zuvor aus. Führen Sie die folgenden Schritte aus, um die Eingabeaufforderungsvorlage zu validieren:

1. Klicken Sie im Prüfprojektauf die Registerkarte Assets .
2. Wiederholen Sie die Schritte in Task 2 , um die Eingabeaufforderungsschablone Zusammenfassung der Anspruchsverarbeitung auszuwerten.
3. Klicken Sie auf die Registerkarte AI Factsheet , wenn die Bewertung abgeschlossen ist.
4. Beide Gruppen von Testergebnissen anzeigen:
   1. Klicken Sie auf Bewertung > Entwickeln > Test.
   2. Klicken Sie auf Evaluation > Validate > Test.

Um eine Vorschau dieser Task anzuzeigen, sehen Sie sich das Video ab 05:04an.