מחקר
תמונה אחת יכולה להפוך לשני מזהי תמונה ב-COCO
בהמרה מבוקרת באמצעות Label Studio SDK 2.1.2, שתי הכרעות תקינות על תיבות עבור משימה אחת ותמונה מקומית אחת יצרו שני מזהי תמונה ב-COCO. שתי רשומות התמונה הכילו בדיוק את אותו נתיב קובץ. כל תיבה הפנתה למזהה תמונה אחר שנוצר. אינדקס Python של COCO, בגרסה המקובעת, הציג את שני המזהים בנפרד. כאשר LABEL_STUDIO_FORCE_ANNOTATOR_EXPORT לא הוגדר במערך הבדיקה הזה, רשומות התיבות הכילו מזהי אנוטציה שנוצרו ולא כללו את מזהי ההכרעה והגורם המבצע המקוריים. רשומות התמונה של הממיר · רשומות התיבות · אינדקס COCO · מזהי תמונה ללא סינון
| מקור לתמונה אחת | תוצאת COCO | אינדקס COCO ללא סינון |
|---|---|---|
| שתי הכרעות שונות | שתי רשומות לאותו נתיב, עם תוצאה B במזהה 0 ותוצאה A במזהה 1 | מזהים 0 ו-1 |
| שתי הכרעות זהות | שתי רשומות לאותו נתיב, עם תוצאה A בשני המזהים | מזהים 0 ו-1 |
| הכרעה אחת שנבחרה | רשומה אחת לנתיב, עם תוצאה A במזהה 0 | מזהה 0 |
הממיר מפיק פריט אחד לכל הכרעה שעומדת בתנאים. בענף שנבדק הוא מקצה מזהה תמונה ומוסיף רשומת תמונה חדשה לכל פריט. גם הכרעות זהות וגם הכרעות שונות הניבו שני מזהים. מערך הבדיקה המקביל של YOLO שולח שתי הכרעות שונות עבור תמונה אחת לאותו נתיב פלט, שבו כתיבה מוצלחת של ההכרעה הישנה מחליפה את החדשה. כאשר מערך נתונים אמור להכיל רשומה אחת לכל תמונה מקורית, ספרו את נתיבי התמונות השונים שנמסרו ובדקו את מיפוי הכרעות המקור לתמונות. מזהים מספריים ייחודיים לבדם אינם מאמתים זאת. הציון בהערכה תלוי באופן שבו הגורם שמפעיל אותה משתמש במזהים, ולא נמדד כאן ציון. השלכת האנוטציות המשותפת
הריצו את python3 -B check-coco-identity.py | cmp - coco-identity-observations.json עם בדיקת כשל בצינור הפקודות. תוכנית הבדיקה, עם ערך SHA-256 fb6f5a0eb3b8f269576353203f40e81b46515e55182f9b377b45ba34e4925d82, משתמשת באותה השלכת אנוטציות, באותה גאומטריית מלבנים ובאותו רכיב כתיבת COCO מתוך גרסת ה-SDK המקובעת, ובאותו אינדקס ובאותה שאילתת מזהים מתוך קוד Python של COCO בגרסה המקובעת. תחליף מקומי לבדיקת גודל תמונה מספק מידות של 100 על 100 לתמונה בדיונית קבועה. תיעוד התוצאות משווה את נתיב תמונת המקור המלא לפני נרמולו לשם קובץ יציב ללא נתיב. שתי הרצות מקומיות והרצה חוזרת עצמאית תאמו בכל שלושת המקרים, בייט אחר בייט. תצפיות שמורות, עם ערך SHA-256 bb4b13aae5a7c471507f1ebcdb9cac2dcd7c2fe62f232489b0a00078ec12e222.
דוח קודם מתעד את השפעת ההכרעה הישנה ב-YOLO. החיפוש בנושא COCO העלה דיווחים בנושאים סמוכים: תוצאות ריקות שאינן חד-משמעיות ואנוטציות נוספות ממסכות מברשת מנותקות. בדיקת חלוץ זו בוחנת מזהי תמונה עבור כמה הכרעות על תמונה אחת. היא משתמשת בקוד ציבורי של ה-SDK ברישיון Apache-2.0 ובקוד COCO ברישיון BSD, בגרסאות מקובעות שמאוחזרות בזמן הריצה, וכוללת קוד משלה ותוצאות בדויות. היישום המותקן, פענוח מדיה, אימון מודלים והערכה אינם נכללים במערך הבדיקה. דוח קודם על YOLO · סוגיית COCO ריק · סוגיית מסכות המברשת · רישיון ה-SDK · רישיון COCO