0 / 0
Go back to the English version of the documentation

Sledování modelů pomocí AI Factsheets

Last updated: 18. 8. 2023
Sledování modelů pomocí AI Factsheets

Použijte soupis modelů s AI Factsheets k uspořádání modelových výukových modelů pro vaši organizaci v rámci strategie řízení AI. Můžete vytvořit případ použití pro každý model, který chcete sledovat, a poté si prohlédnout podrobnosti ze stránky soupisu v katalogu. Použijte filtry k upřesnění pohledu. Například zobrazte pouze případy použití modelu, které jsou ve schváleném stavu.

Chcete-li zobrazit inventář modelu, vyberte ze sekce Katalog v navigačním podokně položku Soupis modelu.

Práce s případy použití modelu

V soupisu modelu můžete:

Vytvoření případu použití modelu

Vytvořte případ použití modelu ke sledování životního cyklu modelu.

  1. V navigačním podokně klepněte na sekci Katalog a poté klepněte na položku Soupis modelu.
  2. Klepněte na volbu Nový případ použití modelu a zadejte název a popis.
  3. Vyberte katalog obsahující případ použití modelu.
  4. Poté, co vytvoříte případ použití, můžete uvést další podrobnosti, jako např. Vzorový účel, obchodní podmínky nebo podpůrnou dokumentaci.

Zobrazení podrobností o případu použití modelu

Inventář modelu obsahuje případy použití modelu, které poskytují podrobnosti o životním cyklu modelu, účelu a skutečnostech, které podporují řízení. Pro každý příklad použití modelu můžete zobrazit:

  • Název příkladu použití modelu.
  • Stav případu použití modelu. Model může například očekávat vývoj, v rámci revize nebo ve výrobě.
  • Obchodní podmínky přidružené k případu použití modelu.
  • Značky dostupné pro případ použití modelu.

Kompletní podrobnosti o tom, co je zahrnuto pro každý model, viz zobrazení modelu a listů implementace.

Změna stavu příkladu použití modelu

Stav případu použití modelu můžete změnit tak, aby odrážel změnu v životním cyklu modelu. Můžete například změnit stav modelu z Implementováno na ověření na Ověřeno poté, co potvrdíte, že model byl odpovídajícím způsobem otestován.

Chcete-li změnit stav příkladu použití modelu, postupujte takto:

  1. Otevřete příklad použití modelu v soupisu modelu.
  2. Přepněte na kartu Aktivum .
  3. Klepněte na ikonu Upravit.
  4. Vyberte nový stav a klepněte na tlačítko Aktualizovat , chcete-li uložit.

Případ použití modelu je zobrazen v nové kategorii stavu.

Odstranění případu použití modelu

Chcete-li odstranit případ použití modelu ze soupisu, klepněte na volbu Odebrat z položky akce na dlaždici modelu použití modelu. Případ použití modelu je odebrán ze soupisu a všechny přidružení k modelu v projektu nebo prostoru se odstraní.

Zobrazení výstrah

Když vyhodnotíte model, můžete nastavit prahové hodnoty pro spuštění výstrahy, když je splněna prahová hodnota. Můžete například nastavit výstrahu, která se spustí, pokud se detekce zkreslení pro monitorované skupiny změní o 10%. Výstrahy pro model můžete zobrazit z případu použití modelu.

Má-li některá implementace modelu výstrahy, zobrazují se výstrahy v inventáři modelu jako odznak v případu použití modelu. Vyberte položku Náhled výstrah z položky nabídky akcí v případu použití modelu na stránce s inventářem modelu a zobrazí se podrobnosti o výstrahách.

Zobrazení informačního listu pro model

Na stránce pro sledování modelu pro případ použití modelu v zásobách klepněte na kartu Aktivum a prohlédněte si přidružený informační list. Tento informační list můžete také zobrazit, když zobrazujete podrobnosti modelu v projektu, prostoru nebo katalogu. Další informace naleznete v tématu Zobrazení listu.

Po registraci modelu jsou fakta o modelu zachycována a uchována automaticky v každém bodě životního cyklu modelu, včetně vždy, když se model aktualizuje nebo změní. Například události jsou zachyceny, když je model:

  • Vytvořit
  • Aktualizováno jakýmkoli způsobem, včetně revidovaného popisu značky nebo popisu
  • Povýšen do prostoru
  • Publikováno do katalogu
  • Testováno s implementací
  • Vyhodnocený životní cyklus v OpenScale

K aktualizaci informačního listu není nutný žádný zásah uživatele.

Navíc jsou fakta zachována o modelu v zápisníku po spuštění knihovny IBM AI Governance Facts Client Library (AIGovFactsClient) v zápisníku. Z tohoto bodu se metadata životního cyklu a metriky automaticky zachovají.

Zobrazení informačního listu pro implementaci

Na stránce s podrobnostmi o modelu pro případ použití modelu v zásobách klepněte na kartu Aktivum a prohlédněte si přidružený informační list. Při zobrazení podrobností implementace v prostoru můžete také zobrazit tento informační list. Další informace naleznete v tématu Zobrazení listu.

Podrobnosti sledování

Je-li sledování povoleno, záznam faktů se spouští pomocí akcí na modelu nebo souvisejících aktivech. Podobně i změny v řízení životního cyklu AI, kde se model zobrazuje v modelovém příkladu použití k zobrazení postupu od vývoje až po provoz. Když je například model uložen v projektu, model se zobrazí ve sloupu pro vývoj. Je-li model povýšen do prostoru, aktualizuje se případ použití tak, aby zobrazoval model v sloupu testu atd.

Umístění modelu Vyvíjet Testujte Ověřit platnost Operovat
Projekt ✓
Prostor ✓
Prostor značený pomocí nástroje AIRegulace: Předprodukční ✓
Prostor značený s volbou AIXIT: Production ✓
Preproduction Watson OpenScale ✓
Produkce produktu Watson OpenScale ✓

Tyto poznámky popisují, jak interakce mezi komponentami životního cyklu řídí umístění komponenty Watson Machine Learning v případu použití modelu.

  • Je-li model povýšen do prostoru, model se zobrazí ve sloupu testu. Je-li implementace pro daný model vyhodnocena v produktu Watson OpenScale a označkovaná jako předprodukce, pak se model zobrazí spíše v Ověřit, než Test. Je-li implementace modelu označena jako produkční, místo předběžné výroby, přesune se do sloupku provozu.

  • Pokud přiřadíte značku prostoru AIGovernance: Pre-production nebo AIGovernance: Production, model se zobrazí v rámci sloupku Validovat nebo Operate, resp.

    Poznámka: Tato změna je spuštěna akcí, která má za následek změnu metadat modelu, jako je aktualizace názvu modelu, popisu nebo značek, pokud je značka přidána do prostoru poté, co je model sledován.

  • Je-li model povýšen do prostoru, kde má prostor značku AIGovernance: Pre-production, zobrazí se model v rámci sloupku Validace. Je-li implementace pro daný model vyhodnocena v produktu Watson OpenScale a označena jako předprodukce, pak se model zobrazí v rámci sloupku Validace. Je-li implementace modelu označena jako produkční, místo předběžné výroby, přesune se do sloupku provozu.

  • Je-li model povýšen do prostoru, kde má prostor značku AIGovernance: Production, zobrazí se v sloupu Operate. Je-li implementace pro tento model vyhodnocena v produktu Watson OpenScale a označena jako produkce, pak bude i nadále v sloupu Operate. Je-li však označena jako předprodukce, zobrazí se v rámci sloupku Validace.

  • Pokud implementace modelu není vyhodnocena v produktu Watson OpenScale, bude mít značku Pending Evaluation . Je-li vyhodnocována implementace modelu, bude mít značku Evaluated . Je-li implementace modelu schválena po vyhodnocení v produktu Watson OpenScale, bude mít značku Approved .

Další informace