Überprüfen Sie die Details, die für jedes überwachte Asset in einem Factsheet erfasst werden, das einem KI-Anwendungsfall zugeordnet ist. Sie können auch einen Bericht drucken, um die Factsheet-Details freizugeben oder zu archivieren.
Was wird in einem Factsheet erfasst?
Copy link to section
Ab dem Punkt, an dem Sie mit der Verfolgung eines Assets in einem KI-Anwendungsfall beginnen, werden Fakten in einem Factsheet für das Asset erfasst. Wenn das Asset von einer Phase des Lebenszyklus zur nächsten wechselt, werden die Fakten zum entsprechenden Abschnitt hinzugefügt.
Beispiel: Ein Factsheet für eine Eingabeaufforderungsvorlage erfasst Informationen für die folgenden Kategorien:
Kategorie
Beschreibung
Verwaltung
Grundlegende Details für die Governance, einschließlich des Namens des Anwendungsfalls, der Versionsnummer und der Informationen zum Ansatz
Basismodell
name und Anbieter für das foundation model
Eingabeaufforderungsvorlage
Name, Beschreibung, Eingabe und Variablen der Eingabeaufforderungsschablone
Eingabeaufforderungsparameter
Optionen zum Erstellen der Eingabeaufforderungsschablone, z. B. Decodierungsmethode
Evaluierung
Ergebnisse der letzten Bewertung
Anhänge
angehängte Dateien und unterstützende Dokumente
Die folgende Abbildung zeigt die Factsheets für eine Eingabeaufforderungsvorlage, die in einem KI-Anwendungsfall verfolgt wird.
Wichtig: Das Factsheet zeichnet die letzte Aktivität in einer beliebigen Kategorie auf. Wenn Sie beispielsweise eine implementierte Eingabeaufforderungsvorlage in einem Vorproduktionsbereich und anschließend in einem Produktionsbereich auswerten, werden die Details aus der Produktionsbewertung im Factsheet erfasst und die vorherigen Daten überschrieben. Daher verwaltet das Factsheet einen vollständigen Datensatz des aktuellen Status der Anlage.
Verfolgungsdetails
Copy link to section
Wenn die Verfolgung aktiviert ist, wird die Aufzeichnung von Fakten durch Aktionen für das überwachte Asset ausgelöst. Ebenso Änderungen im KI-Lebenszyklusmanagement, bei denen das Asset in einem KI-Anwendungsfall angezeigt wird, um den Fortschritt von der Entwicklung bis zum Betrieb darzustellen. Wenn beispielsweise ein Asset in einem Projekt gespeichert und die Verfolgung aktiviert ist, wird das Asset in der Entwicklungsphase angezeigt. Wenn ein Asset ausgewertet wird, unabhängig davon, ob es sich um ein Projekt oder einen Bereich handelt, wird der Anwendungsfall aktualisiert, um das Asset und alle Bewertungsdaten in der Validierungsphase anzuzeigen. Bereitstellungen in der Produktionsumgebung werden in der Betriebsphase angezeigt.
Modellposition
Weiterqualifizieren
Validieren
Ausführung
Projekt
✓
Vorproduktionsbereich
✓
Vorproduktionsbereich
✓
Produktionsbereich
✓
Position der Eingabeaufforderungsvorlage
Weiterqualifizieren
Validieren
Ausführung
Entwicklungsprojekt
✓
Validierungsprojekt
✓
Bereich
✓
Hinweis: Wenn Sie AI-Anwendungsfälle in einer früheren Version erstellt haben, werden die Daten des Factsheets, die in der Testphase aufgelistet waren, nun in der Validierungsphase aufgelistet. Dies spiegelt einen Schwerpunkt darauf wider, den Assetlebenszyklus besser zu reflektieren, anstatt sich darauf zu konzentrieren, ob eine Bewertung in einem Projekt oder einem Raum durchgeführt wurde.
Ein Datenblatt für eine Vorlage für eine Aufforderung anzeigen
Copy link to section
Die folgende Abbildung zeigt die Lebenszyklusinformationen für die Eingabeaufforderungsvorlage.
Klicken Sie auf eine Kategorie, um Details zu einem bestimmten Aspekt einer Eingabeaufforderungsvorlage anzuzeigen. Klicken Sie beispielsweise auf "Parameter ", um Details zu den Einstellungen für die Eingabeaufforderungsvorlage anzuzeigen.
Ein Datenblatt für ein Modell des maschinellen Lernens anzeigen
Copy link to section
Das Datenblatt für das Modell enthält alle Details für ein Modell für maschinelles Lernen.
Die Details im Datenblatt hängen von der Art des Modells ab. Dieses Modell wurde beispielsweise mithilfe von AutoAI erstellt und zeigt Folgendes an:
Allgemeine Modelldetails, wie Name, Modell-ID, Typ des Modells und verwendete Softwarespezifikation. Das Eingabeschema zeigt die Details der Modellstruktur.
Schulungsinformationen, einschließlich des zugehörigen Projekts, der Trainingsdatenquelle und des Namens der Hybrid-Pipeline.
Allgemeine Bereitstellungsdetails, wie der Name der Bereitstellung, die Bereitstellungs-ID und die verwendete Softwarespezifikation.
Evaluierungsdetails für Ihr Modell, einschließlich:
Nutzlastprotokollierung und Feedback-Dateninformationen
Qualitätsmetriken nach der Bewertung der Bereitstellung
Fairness-Metriken, die auf Voreingenommenheit in überwachten Gruppen testen
Drift und Drift v2 Details nach einer Bewertung
Details zur globalen Erklärbarkeit
Metrikinformationen von benutzerdefinierten Monitoren
Modellhafte Gesundheitsdetails zu Bewertungsanfragen für Online-Einsätze, einschließlich Nutzlastgröße, Datensätze, Bewertungsanfragen, Durchsatz und Latenz sowie Benutzer
Hinweis:
Wenn die Integration mit IBM OpenPages aktiviert ist, werden diese Fakten mit OpenPages geteilt.
Nutzlastprotokollierung und Feedback-Dateninformationen
Qualitätsmetriken nach der Bewertung der Bereitstellung
Fairness-Metriken, die auf Voreingenommenheit in überwachten Gruppen testen
Details zur Drift nach einer Bewertung
Details zur globalen Erklärbarkeit
Metrikinformationen von benutzerdefinierten Monitoren
Modellhafte Gesundheitsdetails zu Bewertungsanfragen für Online-Einsätze, einschließlich Nutzlastgröße, Datensätze, Bewertungsanfragen, Durchsatz und Latenz sowie Benutzer
Nächste Schritte
Copy link to section
Klicken Sie auf Bericht exportieren , um einen Bericht des Factsheets zu speichern.