Przejdź do treści głównej

Menu

Badania

Jeden obraz może otrzymać dwa identyfikatory obrazu COCO

Język: Polski

W kontrolowanej konwersji za pomocą Label Studio SDK 2.1.2 dwie prawidłowe oceny z ramkami dla jednego zadania i jednego lokalnego obrazu wygenerowały dwa identyfikatory obrazu COCO. Oba wiersze obrazów zawierały dokładnie tę samą ścieżkę do pliku. Każda ramka odwoływała się do innego wygenerowanego identyfikatora obrazu. Indeks COCO Python w przypiętej wersji wyświetlił następnie oba identyfikatory osobno. Przy nieustawionej zmiennej LABEL_STUDIO_FORCE_ANNOTATOR_EXPORT w tym zestawie testowym wiersze ramek zawierały wygenerowane identyfikatory adnotacji i pomijały pierwotne identyfikatory ocen oraz osób wykonujących adnotacje. Wiersze obrazów konwertera · Wiersze ramek · Indeks COCO · Niefiltrowane identyfikatory obrazów

Dane źródłowe jednego obrazuWynik COCONiefiltrowany indeks COCO
Dwie rozbieżne ocenyDwa wiersze dla tej samej ścieżki: wynik B dla ID 0, a A dla ID 1ID 0 i 1
Dwie zgodne ocenyDwa wiersze dla tej samej ścieżki z wynikiem A dla obu IDID 0 i 1
Jedna wybrana ocenaJeden wiersz dla ścieżki z wynikiem A dla ID 0ID 0

Konwerter tworzy jeden element na każdą kwalifikującą się ocenę. W testowanej gałęzi przydziela identyfikator obrazu i dodaje nowy wpis obrazu dla każdego elementu. Zarówno zgodne, jak i rozbieżne oceny dały dwa identyfikatory. Powiązany zestaw testowy YOLO kieruje dwie rozbieżne oceny jednego obrazu do jednej ścieżki wyjściowej, gdzie pomyślny zapis starszej oceny zastępuje nowszą. Gdy zbiór danych ma zawierać jeden wiersz na każdy rzeczywisty obraz, policz różne dostarczone ścieżki obrazów i sprawdź przypisanie ocen źródłowych do obrazów. Same unikatowe identyfikatory liczbowe nie potwierdzają spełnienia tego warunku. Wynik ewaluacji zależy od tego, jak kod wywołujący używa identyfikatorów; w tym badaniu nie zmierzono żadnego wyniku. Wspólna projekcja adnotacji

Uruchom python3 -B check-coco-identity.py | cmp - coco-identity-observations.json z włączonym sprawdzaniem błędów potoku. Skrypt sprawdzający, SHA-256 fb6f5a0eb3b8f269576353203f40e81b46515e55182f9b377b45ba34e4925d82, używa dokładnie tej samej projekcji adnotacji, geometrii prostokątów i mechanizmu zapisu COCO co przypięta wersja SDK oraz dokładnie tego samego indeksu i zapytania o identyfikatory co przypięty kod źródłowy COCO Python. Lokalny zamiennik funkcji odczytu rozmiaru obrazu zwraca 100 na 100 dla ustalonego fikcyjnego obrazu. Zapis wyników porównuje pełną ścieżkę obrazu źródłowego przed znormalizowaniem jej do stałej nazwy pliku. Dwa lokalne uruchomienia i niezależne odtworzenie dały identyczne wyniki co do bajtu we wszystkich trzech przypadkach. Zapisane obserwacje, SHA-256 bb4b13aae5a7c471507f1ebcdb9cac2dcd7c2fe62f232489b0a00078ec12e222.

Wcześniejszy raport dokumentuje wpływ starszej oceny w YOLO. Wyszukiwanie dotyczące COCO ujawniło powiązane zgłoszenia o niejednoznacznych pustych wynikach i dodatkowych adnotacjach pochodzących z odłączonych masek pędzla. Ten pilotaż sprawdza identyfikatory obrazów przy wielu ocenach jednego obrazu. Korzysta z publicznego kodu SDK na licencji Apache-2.0 i kodu COCO na licencji BSD, pobieranych w przypiętych wersjach podczas działania, oraz zawiera własny kod i fikcyjne wyniki. Zainstalowana aplikacja, dekodowanie mediów, trenowanie modelu i ewaluacja pozostają poza zakresem zestawu testowego. Wcześniejszy raport dotyczący YOLO · Zgłoszenie dotyczące pustego wyniku COCO · Zgłoszenie dotyczące maski pędzla · Licencja SDK · Licencja COCO