मॉडल कमज़ोर पड़ते हैं। कैमरे हिल जाते हैं, लाइटिंग बदलती है, पैकेजिंग नए सिरे से डिज़ाइन होती है, सीज़न बदलते हैं। इसमें से ज़्यादातर पकड़ने के लिए आपको मॉनिटरिंग प्लेटफॉर्म की ज़रूरत नहीं — आपकी मौजूदा अलर्टिंग में तीन चेक आम मामले संभाल लेंगे।
चेक एक: प्रेडिक्शन डिस्ट्रिब्यूशन
रोज़ाना रिकॉर्ड करें कि हर क्लास कितनी बार प्रेडिक्ट हुई। अगर कोई डिफेक्ट क्लास जो आम तौर पर एक शिफ्ट में बारह बार आती है, दो दिन तक शून्य पर आ जाए, तो कुछ बदला है — लाइन, कैमरा या मॉडल। अलर्ट बदलाव पर रखें, पूर्ण संख्या पर नहीं।
चेक दो: कॉन्फिडेंस का फैलाव
स्वीकार हुई प्रेडिक्शन का औसत कॉन्फिडेंस ट्रैक करें। धीरे-धीरे नीचे खिसकना भरोसेमंद शुरुआती चेतावनी है, जो आमतौर पर एक्युरेसी की शिकायतें आपके पास पहुँचने से कई हफ्ते पहले दिख जाती है।
चेक तीन: एक छोटा तय ऑडिट सैंपल
हफ्ते में बीस रैंडम फ्रेम किसी ऑपरेटर से लेबल करवाएँ। इसमें कुछ मिनट लगते हैं और अंदाज़े की जगह असल में नापी गई एक्युरेसी का ट्रेंड मिलता है। इस लिस्ट में यही सबसे काम का चेक है।
- प्रति क्लास, प्रति दिन प्रेडिक्शन काउंट — बड़े बदलाव पर अलर्ट
- स्वीकार हुई प्रेडिक्शन का औसत कॉन्फिडेंस — गिरते ट्रेंड पर अलर्ट
- हफ्ते में बीस इंसान-लेबल किए फ्रेम — नापी गई एक्युरेसी ट्रैक करें
- इनपुट हेल्थ: फ्रेम रेट, ब्राइटनेस, ब्लर — कैमरे की दिक्कत सबसे पहले पकड़ता है
आउटपुट से पहले इनपुट देखें
ज़्यादातर गिरावट मॉडल की होती ही नहीं। वह लेंस होता है जिसे सफाई चाहिए, कैमरा जो खिसक गया, या लाइट जो बंद हो गई। औसत फ्रेम ब्राइटनेस और ब्लर की मॉनिटरिंग इन्हें किसी भी ड्रिफ्ट मेट्रिक से तेज़ और सस्ते में पकड़ती है।
लिख लें कि अलर्ट आने पर क्या होता है और कौन करता है। बिना ज़िम्मेदार के ड्रिफ्ट अलर्ट एक ऐसा डैशबोर्ड है जिसे कोई खोलता नहीं।
रीट्रेनिंग का ट्रिगर पहले से तय करें
एक तय शर्त पर रीट्रेन करें — लगातार दो हफ्ते नापी गई एक्युरेसी तय सीमा से नीचे — न कि इस आधार पर कि सबसे ज़ोर से कौन शिकायत कर रहा है। इससे फैसला बोरिंग बना रहता है, और यही आप चाहते हैं।