मुख्य सामग्री पर जाएँ

मेन्यू

शोध

ऐसे सिस्टम का मूल्यांकन कैसे करें जो कुछ मामले लेने से मना कर सकता है

भाषा: हिन्दी

दोनों काम करने के तरीकों के लिए जाँच के मामलों की एक ही सूची रखें। हर मामले में मुख्य सिस्टम का अनुमान और उस पर उसका भरोसा, उसने मामला लिया या नहीं, वैकल्पिक तरीके का जवाब अगर मिला हो, और अंतिम नतीजा दर्ज करें। इन बातों से आप सही जवाबों की दर की तुलना करने से पहले तीन जाँच कर सकते हैं।

देखें कि सिस्टम कितने मामले लेता है और उन्हें कैसे चुनता है। कवरेज बताता है कि कुल मामलों में से कितने मामलों को मुख्य सिस्टम ने खुद सँभाला। छह मामलों की जाँच दोबारा चलाई गई। चार स्कोर बराबर होने की वजह से, भरोसे की सीमा बदलने पर लिए गए मामलों की संख्या एक से सीधे पाँच हो गई। ठीक तीन मामले लेने पर बराबर स्कोर वाले समूह को बाँटा जा सकता था। स्कोर के हिसाब से क्रम लगाने और बराबरी पर फ़ाइल का क्रम इस्तेमाल करने पर, सिर्फ़ पंक्तियों का क्रम बदलने से इन तीन मामलों में शून्य या दो गलतियाँ हुईं। सीमा इस्तेमाल करने पर वास्तविक कवरेज बताएँ। संख्या तय होने पर बराबरी का नियम और लिए गए मामलों की आईडी दर्ज करें। scikit-learn में स्कोर की सीमाएँ

वैकल्पिक तरीके को मिले मामलों में उसके सही फैसले गिनें। 12 मामलों की एक अलग जाँच दोबारा चलाने पर A और B ने छह-छह मामले लिए और तीन आईडी दोनों में समान थीं। A ने लिए गए छह मामलों में सही जवाब दिया, जबकि B ने पाँच में। वैकल्पिक तरीका दोनों के लिए वही था और हर मामले के लिए उसका जवाब तय था। उसने A के छोड़े हुए मामलों में दो और B के छोड़े हुए मामलों में पाँच सही जवाब दिए। पूरे काम को गिनने पर B, 10 सही फैसलों के साथ, 8 सही फैसलों वाले A से आगे रहा। लिए गए मामलों और पूरी सूची, दोनों की सही जवाबों की दर बताएँ। वैकल्पिक तरीके का संस्करण और छोड़े गए मामलों के नतीजे रिपोर्ट के साथ रखें। अनुमान लगाने वाले सिस्टम और वैकल्पिक तरीके का संयुक्त मूल्यांकन

देखें कि किन गायब नतीजों से बढ़त बदल सकती है। 12 मामलों की जाँच में दोनों सिस्टम ने जिन मामलों को आगे भेजा, उनमें से तीन के नतीजे छिपाने पर नतीजों को भरने के हर संभव तरीके में B दो सही फैसलों से आगे रहा। ऐसा इसलिए हुआ क्योंकि हर छिपा नतीजा दोनों के लिए एक ही था। जिन मामलों को दोनों ने अलग ढंग से संभाला, उनमें से छह नतीजे छिपाने पर B में से A घटाने पर अंतर −4 से +2 तक रहा। साझा नतीजों वाली गणना तभी करें जब दोनों सिस्टम आगे भेजे गए हर मामले के लिए एक ही नतीजा इस्तेमाल करेंगे। अगर दोनों में से कोई भी आगे निकल सकता है, तो पहले उन मामलों के नतीजे ढूँढें जिन्हें दोनों ने अलग ढंग से संभाला।

स्कोर के साथ कुल मामलों की संख्या, लिए गए मामलों की संख्या, हर रास्ते पर सही फैसलों की संख्या और गायब नतीजों की संख्या दें। अगर डेटा अधूरा है, तो बताएँ कि बची हुई संभावित सीमा किन मान्यताओं पर आधारित है।