Cercetare
O imagine poate genera două ID-uri de imagine COCO
Într-o conversie controlată cu Label Studio SDK 2.1.2, două adnotări valide cu casete pentru o sarcină și o imagine locală au generat două ID-uri de imagine COCO. Ambele rânduri de imagine conțineau exact aceeași cale de fișier. Fiecare casetă făcea referire la un ID de imagine generat diferit. Indexul Python COCO fixat la o versiune a listat apoi separat ambele ID-uri. Cu LABEL_STUDIO_FORCE_ANNOTATOR_EXPORT nesetată în acest caz de test, rândurile casetelor conțineau ID-uri de adnotare generate și omiteau ID-urile originale ale adnotărilor și ale autorilor. Rânduri de imagine din convertor · Rânduri ale casetelor · Index COCO · ID-uri de imagine nefiltrate
| Sursa pentru o imagine | Rezultat COCO | Index COCO nefiltrat |
|---|---|---|
| Două adnotări diferite | Două rânduri pentru aceeași cale, cu rezultatul B pe ID-ul 0 și A pe ID-ul 1 | ID-urile 0 și 1 |
| Două adnotări identice | Două rânduri pentru aceeași cale, cu rezultatul A pe ambele ID-uri | ID-urile 0 și 1 |
| O adnotare selectată | Un rând pentru cale, cu rezultatul A pe ID-ul 0 | ID-ul 0 |
Convertorul produce un element pentru fiecare adnotare eligibilă. În ramura testată, alocă un ID de imagine și adaugă o nouă intrare de imagine pentru fiecare element. Atât adnotările identice, cât și cele diferite au generat două ID-uri. Cazul de test YOLO asociat trimite două adnotări diferite pentru o imagine către aceeași cale de ieșire, unde scrierea reușită a adnotării mai vechi o înlocuiește pe cea mai nouă. Numără căile distincte ale imaginilor livrate și verifică corespondența dintre adnotările sursă și imagini atunci când setul de date ar trebui să conțină un rând pentru fiecare imagine de bază. ID-urile numerice unice nu sunt suficiente pentru a verifica această proprietate. Scorul unei evaluări depinde de modul în care apelantul folosește ID-urile, iar aici nu a fost măsurat niciun scor. Proiecție comună a adnotărilor
Rulează python3 -B check-coco-identity.py | cmp - coco-identity-observations.json cu verificarea erorilor în pipeline activată. Scriptul de verificare, SHA-256 fb6f5a0eb3b8f269576353203f40e81b46515e55182f9b377b45ba34e4925d82, folosește exact proiecția adnotărilor, geometria dreptunghiurilor și componenta de scriere COCO din SDK-ul fixat la o versiune, precum și exact indexul și interogarea ID-urilor din sursa Python COCO fixată la o versiune. Un substitut local pentru dimensiunea imaginii furnizează 100 pe 100 pentru o imagine fictivă prestabilită. Rezultatul verificării compară calea completă a imaginii sursă înainte de a o normaliza la un nume de fișier stabil. Două rulări locale și o reluare independentă au coincis octet cu octet în toate cele trei cazuri. Observații salvate, SHA-256 bb4b13aae5a7c471507f1ebcdb9cac2dcd7c2fe62f232489b0a00078ec12e222.
Un raport anterior documentează efectul adnotării mai vechi în YOLO. Căutarea privind COCO a găsit rapoarte conexe despre rezultate goale ambigue și adnotări suplimentare provenite din măști de pensulă detașate. Acest studiu pilot verifică ID-urile de imagine pentru mai multe adnotări ale unei imagini. Folosește cod public al SDK-ului, sub licența Apache-2.0, și cod COCO sub licență BSD, ambele fixate la versiuni și preluate la rulare, și include propriul cod și rezultate fictive. Aplicația instalată, decodarea fișierelor media, antrenarea și evaluarea modelelor rămân în afara cazului de test. Raport YOLO anterior · Problemă cu rezultate COCO goale · Problemă cu măștile de pensulă · Licența SDK-ului · Licența COCO