Výzkum
Jak zopakovat výsledek slučování podle převrácených pořadí
Chcete-li zopakovat výsledek slučování podle převrácených pořadí (RRF), vyjděte ze seřazeného seznamu, který každý zdroj skutečně předal ke sloučení. Uložte seznamy, konstantu pořadí, váhy zdrojů a ID použitá k seskupení. ID kandidátů nebo dokonce první výsledek mohou zůstat stejné, i když se změní podklady pro výpočet skóre. Vzorec RRF
Porovnejte, co přidává každý seznam
Zaznamenejte, kolik výsledků se bere z každého zdroje a kolik se jich zobrazí na konci. Tyto limity platí v různých krocích. V názorném příkladu prodloužení jednoho vstupního seznamu z jednoho výsledku na dva přidá A příspěvek z druhého zdroje. A tak předstihne B. Všichni kandidáti zůstávají ve sloučené množině. Pokud výstup až po úplném sloučení omezíte na jeden výsledek, dostanete opět A. Zkouška délky vstupního seznamu
U každého kandidáta poblíž limitu porovnejte zahrnutou pozici a příspěvek z každého zdroje. Kandidát může přijít o příspěvek z jednoho seznamu a zůstat ve výběru díky jinému.
Ověřte konstantu pořadí a skutečné váhy
Pokud jsou vstupní pozice stejné, přepočítejte výsledek s konstantou pořadí a vahami zdrojů. V příkladu se třemi seznamy je A dvakrát na prvním místě. B je jednou první a dvakrát dvanáctý. Při kladné konstantě nižší než 10 vede A, při 10 má stejné skóre jako B a při konstantě vyšší než 10 za B zaostává. Uložte pravidlo pro shodu skóre, pokud může změnit výsledek. Zkouška konstanty pořadí
Ověřte, kolikrát se seznam každého zdroje započítal. Započítat přesnou kopii s plnou vahou má stejný účinek jako přidat tuto váhu k původnímu seznamu. Při rozdělení původní váhy mezi kopie zůstanou všechna skóre váženého součtu stejná. Vynásobení všech vah stejným kladným číslem pořadí zachová. Zkouška duplicitního zdroje
Příklad kombinuje délku vstupních seznamů a duplikaci. Vždy zahrnuje celý lexikální seznam A, C, B, D s vahou jedna. Každý sémantický seznam bere první výsledky z B, A, D, C a má také váhu jedna. Konstanta pořadí je 60. Pokud je přítomen druhý sémantický seznam, je přesnou kopií prvního. Kombinovaná zkouška
| Zahrnuté pozice v každém sémantickém seznamu | Jeden sémantický seznam | Dva totožné sémantické seznamy |
|---|---|---|
| 1 | B | B |
| 2 | A | B |
Při přechodu z levého horního do pravého dolního pole zůstává B první, ačkoli se mění limit i počet seznamů. Změna jediného nastavení v každém kroku ukáže, že delší seznam posune do čela A a přičtení kopie vrátí na první místo B.
Ověřte, kterým ID se příspěvky přičítají
Pokud vyhledáváte úryvky a zobrazujete dokumenty, zapište, ke kterému dokumentu každý úryvek patří a kdy je seskupujete. V příkladu vede v každém zdroji jiný úryvek z A. Stejný úryvek z B je v obou zdrojích druhý. Seskupení podle dokumentu v každém zdroji před sloučením řadí A první. Sloučení podle úryvků a následný výběr úryvku s nejvyšším skóre z každého dokumentu řadí B první. Oba výsledky obsahují stejné čtyři dokumenty. Zkouška seskupení úryvků