Výzkum
Jak naplánovat kontrolu vzorku a najít chyby ve štítcích
Než zvolíte velikost vzorku, rozhodněte, k čemu má kontrola sloužit. Pokud dávka obsahuje daný počet chybných štítků, jaké riziko přijmete, že kontrola nenajde žádný? Záleží na výběru řádků, na tom, které chyby hodnotitelé mohou najít, a na rozdělení práce.
Příklady navazují na fiktivní dávku se 120 řádky a šesti chybnými štítky z průvodce hodnocením datových sad. Každý příklad zkoumá jinou část plánu kontroly.
Spočítejte riziko podle způsobu výběru řádků
Nejprve předpokládejte, že kontrola odhalí každou chybu v prohlédnutých řádcích. Rovnoměrný náhodný výběr 20 různých řádků mine všech šest chyb přibližně v 32,63 % případů. Když od náhodného začátku vezmete každý šestý řádek a chyby jsou na stejné pozici v po sobě jdoucích skupinách po šesti, chyby odhalí jen jedna ze šesti počátečních pozic. Riziko, že minete všechny, je 83,33 %.
Nezávislý výběr jednoho řádku z každé skupiny po šesti snižuje riziko v tomto uspořádání na 33,49 %. Jde také o nejvyšší riziko pro tento nezávislý výběr ze skupin bez ohledu na umístění šesti chyb. U pravidelně rozmístěných chyb klesne riziko pod 5 %, jen když použijete všech šest různých počátečních pozic. Při rovnoměrném výběru s dokonalým odhalením chyb stačí 47 řádků.
Oddělte výběr řádků od schopnosti najít chybu
Při 47 rovnoměrně vybraných řádcích je pravděpodobnost, že nenajdete žádnou skutečnou chybu, 4,66 %, pokud najdete každou prohlédnutou chybu. Je 10,06 %, pokud lze každou vybranou chybu odhalit nezávisle s pravděpodobností 80 %. Při tomto předpokladu klesne riziko pod 5 % poprvé u 59 řádků.
U 47 řádků může stejná pravděpodobnost 80 % na chybu znamenat riziko přehlédnutí všech od 8,96 % do 23,73 % podle toho, které chyby lze najít společně. Výpočet předpokládá, že rovnoměrný výběr nezávisí na tom, které chyby může kontrola najít. V nejméně příznivém případě může kontrola odhalit všech šest chyb v 80 % pokusů a žádnou ve zbývajících 20 %. I když každý řádek zkontrolujete jednou, pravděpodobnost, že nenajdete nic, zůstává 20 %. Při testech se známými chybami zaznamenejte, které chyby se v jednotlivých srovnatelných kontrolách našly společně.
Počítejte různé řádky a nezávislé možnosti najít chybu
Uvažujte rozpočet na 60 kontrol řádků. Každý hodnotitel v tomto příkladu může najít všechny přiřazené chyby v 80 % pokusů a žádnou v ostatních. Řádky se přiřazují rovnoměrně a nezávisle na tom, zda lze chyby odhalit.
| Rozdělení práce | Různé řádky | Pravděpodobnost, že se nenajde žádná skutečná chyba |
|---|---|---|
| Jeden hodnotitel zkontroluje 60 řádků | 60 | 21,10 % |
| Dva nezávislí hodnotitelé zkontrolují každý jinou skupinu 30 řádků bez překryvu | 60 | 10,33 % |
| Dva hodnotitelé, kteří dokážou najít chyby ve stejných pokusech, zkontrolují každý jinou skupinu 30 řádků bez překryvu | 60 | 21,10 % |
| Dva nezávislí hodnotitelé zkontrolují stejných 30 řádků | 30 | 20,36 % |
Zaznamenejte ID vybraných řádků, pravidlo výběru, kdo který řádek viděl a předpoklady o odhalování chyb. Posuďte plán podle přijatelného rizika. Kontrola zaměřená na nalezení alespoň jedné skutečné chyby potřebuje samostatné prověření falešných poplachů, kvality rozhodování při neshodách a vhodnosti pro zamýšlený účel.
Příklad výběru vzorku při hodnocení datových sad · Metody výběru vzorku podle Statistics Canada · Výzkum kontrol, které mohou chyby přehlédnout