Translation not up to date
Zasoby modelu z AI Factsheets umożliwiają organizowanie modeli uczenia maszynowego dla organizacji w ramach strategii zarządzania sztuczną inteligencją. Dla każdego modelu, który ma być śledzony, można utworzyć przypadek użycia, a następnie przejrzeć szczegóły na stronie spisu zasobów w katalogu. Użyj filtrów, aby doprecyzować widok. Na przykład można wyświetlić tylko przypadki użycia modelu, które są w stanie zatwierdzonym.
Aby wyświetlić spis zasobów modelu, należy wybrać magazyn Model z sekcji Katalog w panelu nawigacyjnym.
Praca z przypadkami użycia modelu
Z magazynu Model można wykonać następujące czynności:
- Tworzenie przypadku użycia modelu
- Wyświetlanie szczegółów sprawy użycia modelu
- Zmiana statusu przypadku użycia modelu
- Usuwanie przypadku użycia modelu
- Wyszukiwanie lub filtrowanie w celu znalezienia przypadków użycia modelu
- Wyświetlanie alertów
- Wyświetlanie arkusza faksowego dla modelu
- Wyświetlanie arkusza factsheet dla wdrożenia
- Szczegóły śledzenia
Tworzenie przypadku użycia modelu
Utwórz przypadek użycia modelu, aby śledzić cykl życia modelu.
- W panelu nawigacyjnym kliknij sekcję Katalog, a następnie kliknij opcję Model inventory (Model magazynowy).
- Kliknij opcję Nowy przypadek użycia modelu , a następnie wprowadź nazwę i opis.
- Wybierz katalog zawierający przypadek użycia modelu.
- Po utworzeniu przypadku użycia można określić dodatkowe szczegóły, takie jak cel modelu, warunki biznesowe lub dokumentacja uzupełniająca.
Wyświetlanie szczegółów sprawy użycia modelu
Spis zasobów modelu zawiera przypadki użycia modelu, które udostępniałyby szczegółowe informacje na temat cyklu życia modelu, celu i faktów, które obsługują zarządzanie. Dla każdego przypadku użycia modelu można wyświetlić:
- Nazwa przypadku użycia modelu.
- Status przypadku użycia modelu. Na przykład model może być oczekujący na rozwój, w ramach przeglądu lub w produkcji.
- Terminy biznesowe powiązane z przypadkiem użycia modelu.
- Znaczniki dostępne dla przypadku użycia modelu.
Szczegółowe informacje o tym, co znajduje się w poszczególnych modelach, zawiera sekcja wyświetlanie arkuszy modelu i arkuszy wdrażania.
Zmiana statusu przypadku użycia modelu
Użytkownik może zmienić status przypadku użycia modelu, aby odzwierciedlić zmianę w cyklu życia modelu. Na przykład po potwierdzeniu, że model został odpowiednio przetestowany, można zmienić status modelu z Wdrożone do sprawdzania poprawności na Poprawność sprawdzona .
Aby zmienić status przypadku użycia modelu:
- Otwórz przypadek użycia modelu w spisie zasobów modelu.
- Przejdź do karty Zasób .
- Kliknij ikonę Edytuj.
- Wybierz nowy status i kliknij przycisk Aktualizuj , aby zapisać zmiany.
Przypadek użycia modelu jest wyświetlany w nowej kategorii statusu.
Usuwanie przypadku użycia modelu
Aby usunąć przypadek użycia modelu z magazynu, kliknij opcję Usuń z elementu działania w modelu przypadku użycia modelu. Przypadek użycia modelu zostanie usunięty z magazynu, a wszystkie powiązania z modelem w projekcie lub obszarze zostaną usunięte.
Wyszukiwanie lub filtrowanie w celu znalezienia modeli
- Pasek wyszukiwania służy do wyszukiwania przypadku użycia modelu według nazwy, znacznika, klasyfikacji lub terminu biznesowego.
- Aby doprecyzować listę, użyj filtrów w widoku spisu zasobów modelu. Można filtrować według alertu (takie jak zmiana dryftu, uczciwości lub jakości), warunki biznesowe, katalog, klasyfikacja, znaczniki i status.
Wyświetlanie alertów
Podczas wartościowania modelu możliwe jest ustawienie progów w celu wyzwolenia alertu, gdy próg zostanie spełniony. Na przykład można ustawić alert, który jest wyzwalany, jeśli detekcja bias dla monitorowanej grupy zmieni się o 10%. Istnieje możliwość wyświetlenia alertów dla modelu z modelu przypadku użycia modelu.
Jeśli którekolwiek z wdrożeń modelu ma alerty, alerty są wyświetlane w spisie zasobów jako odznaka w przypadku użycia modelu. Wybierz opcję Podgląd alertów z elementu menu działań w przypadku użycia modelu na stronie spisu zasobów modelu, aby wyświetlić szczegóły alertów.
Wyświetlanie arkuszy faktycznych dla modelu
Na stronie śledzenia modelu dla przypadku użycia modelu w spisie magazynowym kliknij kartę Zasób , aby wyświetlić powiązany arkusz faktowy. Arkusz ten można również wyświetlić podczas wyświetlania szczegółów modelu w projekcie, obszarze lub w katalogu. Szczegółowe informacje na ten temat zawiera sekcja Wyświetlanie arkusza roboczego modelu.
Po zarejestrowaniu modelu fakty dotyczące modelu są przechwytywane i zachowywane automatycznie w każdym punkcie cyklu życia modelu, w tym za każdym razem, gdy model jest aktualizowany lub zmieniany. Na przykład zdarzenia są przechwytywane, gdy model jest następujący:
- Utworzone
- Zaktualizowane w jakikolwiek sposób, łącznie ze zmienionym oznakowaniem lub opisem
- Awansowane do obszaru
- Opublikowany w katalogu
- Testowane przy użyciu wdrożenia
- Oceniany cykl życia w OpenScale
Do aktualizacji arkusza nie jest wymagana interwencja użytkownika.
Dodatkowo, fakty są zachowywane na temat modelu w notatniku po uruchomieniu Biblioteka klienta produktu IBM AI Governance Facts Client (klientAIGovFacts) w notatniku. Od tego momentu metadane cyklu życia i wielkości mierzone są zachowywane automatycznie.
Wyświetlanie arkusza factsheet w celu wdrożenia
Na stronie szczegółów modelu dla przypadku użycia modelu w spisie magazynowym kliknij kartę Zasób , aby wyświetlić powiązany arkusz faktowy. Arkusz ten można również wyświetlić podczas wyświetlania szczegółów wdrażania w obszarze. Szczegółowe informacje na ten temat zawiera sekcja Wyświetlanie arkusza roboczego modelu.
Szczegóły śledzenia
Gdy śledzenie jest włączone, rejestrowanie faktów jest wyzwalane przez działania na modelu lub powiązane zasoby. Podobnie zmiany w elemencie sterującym cyklu życia AI, w którym model jest wyświetlany w przypadku użycia modelu, w celu pokazania postępu od programowania do działania. Na przykład, gdy model zostanie zapisany w projekcie, model zostanie wyświetlony w filarze Develop. Gdy model jest awansowany do obszaru, przypadek użycia jest aktualizowany w celu pokazania modelu w filarze testowym itd.
| Położenie modelu | Projektowanie | Testowanie | Sprawdź poprawność | Eksploatacja |
|---|---|---|---|---|
| Projekt | ✓ | |||
| Miejsce | ✓ | |||
| Obszar oznaczony tagami AIGovernance: Pre-produkcja | ✓ | |||
| Obszar oznaczony tagami AIGovernance: Produkcja | ✓ | |||
| Watson OpenScale Pre-produkcja | ✓ | |||
| Watson OpenScale Production | ✓ |
Te uwagi opisują sposób, w jaki interakcje między komponentami cyklu życia są elementami sterującymi, gdy w modelu przypadku użycia modelu jest wyświetlana Watson Machine Learning .
Gdy model jest awansowany do obszaru, model jest wyświetlany w filarze testowym. Jeśli wdrożenie dla tego modelu jest wartościowane w systemie Watson OpenScale i oznaczone jako przedprodukcyjne, wówczas model zostanie wyświetlony w opcji Sprawdź poprawność, a nie Test. Jeśli wdrożenie modelu jest oznaczane jako produkcja zamiast produkcji przedprodukcyjnej, to przenosi się do filaru Operate.
Jeśli zostanie przypisany znacznik obszaru
AIGovernance: Pre-productionlubAIGovernance: Production, model zostanie wyświetlony odpowiednio w filarze Sprawdź poprawność lub Operate.Uwaga: Ta zmiana jest wyzwalana przez działanie powodujące zmianę metadanych modelu, takie jak aktualizowanie nazwy modelu, opisu lub znaczników, jeśli znacznik jest dodawany do obszaru po śledzeniem modelu.Jeśli model jest awansowany do przestrzeni, w której obszar ma znacznik
AIGovernance: Pre-production, model jest wyświetlany w filarze sprawdzania poprawności. Jeśli wdrożenie dla tego modelu jest wartościowane w systemie Watson OpenScale i oznaczone jako przedprodukcyjne, wówczas model zostanie wyświetlony w filarze sprawdzania poprawności. Jeśli wdrożenie modelu jest oznaczane jako produkcja zamiast produkcji przedprodukcyjnej, to przenosi się do filaru Operate.Jeśli model jest awansowany do przestrzeni, w której obszar ma znacznik
AIGovernance: Production, wyświetlany jest w filarze Operate. Jeśli wdrożenie dla tego modelu jest wartościowane w systemie Watson OpenScale i oznaczone jako produkcyjne, to będzie nadal w filarze Operate. Jeśli jednak jest ona oznaczana jako Pre-production, jest ona wyświetlana w filarze sprawdzania poprawności.Jeśli wdrożenie modelu nie jest wartościowane w produkcie Watson OpenScale, będzie miał znacznik
Pending Evaluation. Jeśli wdrożenie modelu jest wartościowane, będzie miał znacznikEvaluated. Jeśli wdrożenie modelu zostanie zatwierdzone po dokonaniu oceny w produkcie Watson OpenScale, będzie miał znacznikApproved.
Więcej inform.
- Sekcja zawiera informacje na temat rejestrowania modeli lub wyświetlania przypadków użycia modelu i arkuszy.
- Informacje na temat programowego spisu zasobów modelu można znaleźć przy użyciu biblioteki klientaIBM AI Governance Facts Client.
- Temat nadrzędny: Zarządzanie spisem zasobów modelu.