Translation not up to date
Watson OpenScale' de değerlendirmeleri yapılandırdığınızda, model performansınızı hakkında öngörüler edinmek için değerlendirme sonuçlarını analiz edebilirsiniz. Gösterge panosu, performans ayrıntılarını gözden geçirmeye, uyarılarla ilgili bilgileri paylaşmaya ya da raporları yazdırmaya ilişkin araçları sağlar.
Gösterge panosundan gözden geçirebileceğiniz bazı ayrıntılar şunlardır:
- Devreye alınan modelinizin işlemlerinizi doğru analiz edip etmediğini belirlemenize yardımcı olacak bir karışıklık matrisi görmek için kalite sonuçlarını inceleyin.
- Bir kesinlik düşüşünden, veri tutarlılığının düşmesinden ya da her ikisinden sorumlu işlemleri görmek için sürüklenme sonuçlarını görüntüleyin.
- Farklı boyutlarla ilişkili puan kartı döşemeleriyle son değerlendirmeniz sırasında oluşturulan metriklerin bir özetini görebileceğiniz model durumu değerlendirme sonuçlarını inceleyin.
İçgörüler gösterge panosundasonuçları görüntülemek için:
Watson Openscale içinde, Insights Dashboard 'u açmak için Etkinlik simgesini
tıklatın.Sonuçları görüntülemek istediğiniz konuşlandırma modeli döşemesini seçin. Watson OpenScale , son değerlendirmenizin sonuçlarını görüntüler.
Belirttiğiniz zaman çerçevesi ve Tarih aralığı ayarlarında değerlendirme sonuçlarının veri görselleştirmelerini görüntülemek için bir değerlendirme bölümündeki
okunu tıklatın. Seçtiğiniz zaman çerçevesi için son değerlendirme, ilişkili veri aralığı sırasında da görüntülenir.Aşağıdaki çözümleme seçeneklerinden birini belirleyerek modelinize ilişkin ayrıntıları görüntülemek için İşlemler menüsünü kullanın:
- Tüm değerlendirmeler: Üretim öncesi modellerde, sonuçlarınızın zaman içinde nasıl değiştiğini anlamak için değerlendirmelerinizin geçmişini görüntüleyin.
- Karşılaştır: Bir modelin hangi sürümünün üretime hazır olduğunu ya da hangi modellerin daha fazla eğitime gereksinim duyabileceğini belirlemenize yardımcı olmak için temel metrikleri vurgulayan bir matris grafiğiyle modelleri karşılaştırın.
- Model bilgilerini görüntüle: Konuşlandırma ortamınızın nasıl ayarlandığını anlamak için modelinizle ilgili ayrıntıları görüntüleyin.
- Rapor PDF dosyasını karşıdan yükle: Tüm metrikleri ve bunların neden bu şekilde puanlandıklarına ilişkin açıklamaları sağlayan bir model özeti raporu oluşturun.
- Uyarı ayarla: Eşik ihlalleriyle ilgili uyarıları bir e-posta adresine gönderin.
Model değerlendirmelerine ilişkin verileri yönetmek için İşlemler menüsünü de kullanabilirsiniz. Daha fazla bilgi için Model hareketlerini göndermebaşlıklı konuya bakın.
Zaman serisi grafikleriyle Watson OpenScale , toplu değerlendirmeleri belirli bir zamana ilişkin sonuçları görüntülemek için seçebileceğiniz veri noktaları olarak görüntüler. Zaman serisi grafikleri üzerine geldiğinizde görüntülenen her veri noktasının zaman damgası, varsayılan Watson OpenScale toplama davranışı nedeniyle en son değerlendirme zaman damgasıyla eşleşmiyor.
Sonuçlar çözümleniyor
Aşağıdaki bölümlerde, Watson OpenScale model değerlendirmelerinizin sonuçlarını nasıl analiz edebileceğiniz açıklanmaktadır:
Watson OpenScale , adalet sonuçlarını incelemenize yardımcı olmak için aşağıdaki veri kümesi tipleri için hesaplamalar sağlar:
- Dengeli: Dengeli hesaplama, seçilen saat için alınan puanlama isteğini içerir. Değerlendirme için gerekli kayıt sayısı alt sınırı karşılanmamışsa, hesaplama önceki saatlerden daha fazla kayıt da içerir. İzlenen özelliğin değeri değiştiğinde modelin yanıtını test etmek için kullanılan daha fazla perturbed ve sentezlenmiş kayıt içerir.
- Bilgi Yükü: Seçilen saat için model tarafından alınan gerçek puanlama istekleri.
- Eğitim: Modeli eğitmek için kullanılan eğitim verileri kayıtları.
- Taraflı: Çalıştırma zamanı ve perturbed verileri işlendikten sonra yöneltme algoritmasının çıkışı.
Grafikle, önyargıyı deneyimleyen grupları gözlemleyebilir ve bu gruplar için beklenen sonuçların yüzdesini görebilirsiniz. Referans grupları için beklenen sonuçların yüzdesini de görebilirsiniz; bu, tüm referans gruplarında beklenen sonuçların ortalamasıdır. Grafikler, bir veri aralığındaki izlenen gruplar için beklenen sonuç yüzdesinin, referans grupları için sonuç yüzdesine oranını karşılaştırarak önyargıların varlığını gösterir.
Grafik ayrıca, yanlılığı tanımlamak için analiz edilen bilgi yükü tablosundaki verilerdeki özniteliğin her ayrı değerine ilişkin başvuru ve izlenen değerlerin dağılımını da gösterir. Özniteliklerin her ayrı değeri için bilgi yükü verilerinin dağılımı gösterilir. Sapma miktarını, model tarafından alınan veri miktarıyla ilişkilendirmek için bu verileri kullanabilirsiniz. Ayrıca, sonuçları çarpıtan ve referans grupları için beklenen sonuçların yüzdesinin artmasına neden olan sapma kaynaklarını belirlemek için beklenen sonuçlara sahip grupların yüzdesini de görebilirsiniz.
Kalite sonuçlarını incelemenize yardımcı olmak için Watson OpenScale , devreye alınan modelinizin işlemlerinizi yanlış analiz edip etmediğini belirlemenize yardımcı olacak bir karışıklık matrisi görüntüler. İkili sınıflandırma modellerinde, kayıtlar yanlış pozitif ya da yanlış negatif olarak ve çok sınıflı modeller için yanlış sınıf atamaları olarak sınıflandırılır. İkili sınıflandırma sorunları için, IBM Watson OpenScale hedef kategoriyi
positiveya danegativedüzeyine atar. Karışıklık matrisinde, pozitif kategorinin etiketi ikinci satırda ya da sütunda bulunur.
Drift değerlendirmeleri için, bir kesinlik düşüşünden, veri tutarlılığının düşmesinden ya da her ikisinden sorumlu işlemleri görüntüleyebilirsiniz. Ayrıca, tanımlanan işlem sayısını ve azaltılmış doğruluk ya da veri tutarlılığının sağlanmasından sorumlu olan modelinizin özelliklerini de görüntüleyebilirsiniz.
Daha fazla bilgi için bkz. drift hareketlerini gözden geçirme.
Sürüklenme v2 değerlendirme sonuçlarını incelediğinizde, Watson OpenScale metriklerle ilgili farklı ayrıntıları görüntülemek için açabileceğiniz daraltılabilir döşemeleri görüntüler. Bir zaman serisi grafiğiyle her metrik puanının zaman içinde nasıl değiştiğinin geçmişini görüntüleyebilir ya da puan çıkışının ve özellik sapmasının nasıl hesaplandığına ilişkin ayrıntıları görüntüleyebilirsiniz. Watson OpenScale tarafından oluşturulan puanlara nasıl katkı sağladıklarını anlamak için her bir özelliğe ilişkin ayrıntıları da görüntüleyebilirsiniz.
Model durumu değerlendirme sonuçlarını gözden geçirdiğinizde Watson OpenScale , son değerlendirmeniz sırasında oluşturulan metriklerin bir özetini farklı boyutlarla ilişkili puan kartı döşemeleriyle sağlar. Birden çok boyutu olan metrikler için, çözümlemek istediğiniz metriği seçmek üzere döşemelerdeki bir açılan menüyü tıklatabilirsiniz. Metriklerinizin zaman içinde nasıl değiştiğini analiz etmek için, zaman çizelgelerini görüntülemek üzere her kategori için daraltılabilir döşemeleri tıklatabilirsiniz.
Daha fazla bilgi için Model sağlıklı işletim değerlendirme metrikleribaşlıklı konuya bakın.
Üst konu: Watson OpenScaleile öngörü elde etme