Příklady zopakování pořadí výsledků hybridního vyhledávání

Slučování podle převrácených pořadí (reciprocal rank fusion, RRF) kombinuje seřazené výsledky vyhledávání tak, že pro každou položku sečte příspěvky ze seznamů, ve kterých se objevuje. Tyto příklady používají smyšlená pořadí a přesné výpočty. Původní vědecký článek o RRF

Stáhnout pět záznamů pro opakované spuštění a uložené výsledky (ZIP). Rozbalte soubory a podle pokynů v souboru README je spusťte pomocí Pythonu 3.

Kolik výsledků předalo každé vyhledávání?

Ponechání 2 výsledků z jednoho vyhledávání místo 1 přidá položce A další příspěvek a posune ji před B. Všechny položky zůstávají ve sloučeném seznamu. Omezení konečného výstupu na 1 výsledek i po úplném sloučení vrátí A. Vstupní limit určuje příspěvky. Výstupní limit určuje, co čtenář uvidí.

Co mění konstanta pořadí?

A se dvakrát umístilo na prvním místě. B se jednou umístilo na prvním a dvakrát na dvanáctém místě. Pro kladné konstanty menší než 10 vede A, při hodnotě 10 mají A a B stejné skóre a při hodnotách vyšších než 10 se A dostává za B. Při opakovaném spuštění použijte stejné pravidlo pro řešení shodného skóre.

Započítal se seznam výsledků dvakrát?

Ve váženém součtu má zahrnutí přesné kopie seznamu s vlastní plnou váhou stejný účinek jako přičtení této váhy k původnímu seznamu. Rozdělení původní váhy mezi obě kopie zachová skóre každé položky. Vynásobení všech vah stejným kladným číslem zachová pořadí.

Co se stane, když se změní obě nastavení?

Pořadí založené na slovech je A, C, B, D. Pořadí založené na významu je B, A, D, C. Každý zahrnutý seznam má váhu 1 a konstanta pořadí je 60. Při hloubce 1 vítězí B bez ohledu na to, zda se seznam založený na významu započítá jednou, nebo dvakrát. Při hloubce 2 vítězí A, pokud se tento seznam započítá jednou, a B, pokud se započítá dvakrát. Při porovnání pouze prvního a posledního nastavení by v obou případech vyšlo jako vítěz B. Při opakovaném spuštění měňte vždy jen jednu věc, abyste zjistili, co způsobilo rozdíl.

Kdy se úryvky seskupují do dokumentů?

Na prvním místě obou seznamů výsledků vyhledávání jsou 2 různé úryvky z dokumentu A. Na druhém místě obou seznamů je stejný úryvek z dokumentu B. Seskupení úryvků podle dokumentů před sloučením seznamů umístí na první místo A. Sloučení podle úryvků a následné seřazení dokumentů podle úryvku s nejvyšším skóre v každém dokumentu umístí na první místo B. Oba výstupy obsahují stejné 4 dokumenty.