Üretim İzleme: Alarmı Ne Zaman Çalıyorsun?
Model üretimde bozulmaya başladığında soru yalnızca “drift var mı?” değildir. Ne kadar erken gördüğün, en kötü dilimi izleyip izlemediğin ve retrain'in ne kadar geciktiği gerçek hasarı belirler.
İlk kez burada mısın? Monitoring sezgisini 3 adımda oku
1. Drift hızını artır
Dünya hızlı değişiyorsa, geç alarm eşiği sessiz hasarı haftalarca biriktirebilir.
2. Dilim kapsamını düşür
Global metrik makul görünürken en kötü slice çok daha hızlı kırılabilir; kör nokta burada oluşur.
3. Retrain gecikmesini izle
Alarm erken gelse bile iyileşme geç başlarsa sistem uzun süre kırmızı bölgede kalabilir.
Zaman ekseninde sistem sağlığı
Global doğruluk
En kötü dilim
Drift skoru
Okuma
Alarm eşiği makul ve kapsam yeterliyse drift skoru erken yükselir; sistem en kötü dilim tamamen çökmeden müdahale eder.