# Jak zopakovat výsledek slučování podle převrácených pořadí

Chcete-li zopakovat výsledek slučování podle převrácených pořadí (RRF), vyjděte ze seřazeného seznamu, který každý zdroj skutečně předal ke sloučení. Uložte seznamy, konstantu pořadí, váhy zdrojů a ID použitá k seskupení. ID kandidátů nebo dokonce první výsledek mohou zůstat stejné, i když se změní podklady pro výpočet skóre. [Vzorec RRF](https://cormack.uwaterloo.ca/cormack/cormacksigir09-rrf.pdf)

## Porovnejte, co přidává každý seznam

Zaznamenejte, kolik výsledků se bere z každého zdroje a kolik se jich zobrazí na konci. Tyto limity platí v různých krocích. V názorném příkladu prodloužení jednoho vstupního seznamu z jednoho výsledku na dva přidá A příspěvek z druhého zdroje. A tak předstihne B. Všichni kandidáti zůstávají ve sloučené množině. Pokud výstup až po úplném sloučení omezíte na jeden výsledek, dostanete opět A. [Zkouška délky vstupního seznamu](https://sapien1.com/cs/research/replay-hybrid-search-ranking-evidence/evidence.html#input-depth)

U každého kandidáta poblíž limitu porovnejte zahrnutou pozici a příspěvek z každého zdroje. Kandidát může přijít o příspěvek z jednoho seznamu a zůstat ve výběru díky jinému.

## Ověřte konstantu pořadí a skutečné váhy

Pokud jsou vstupní pozice stejné, přepočítejte výsledek s konstantou pořadí a vahami zdrojů. V příkladu se třemi seznamy je A dvakrát na prvním místě. B je jednou první a dvakrát dvanáctý. Při kladné konstantě nižší než 10 vede A, při 10 má stejné skóre jako B a při konstantě vyšší než 10 za B zaostává. Uložte pravidlo pro shodu skóre, pokud může změnit výsledek. [Zkouška konstanty pořadí](https://sapien1.com/cs/research/replay-hybrid-search-ranking-evidence/evidence.html#rank-constant)

Ověřte, kolikrát se seznam každého zdroje započítal. Započítat přesnou kopii s plnou vahou má stejný účinek jako přidat tuto váhu k původnímu seznamu. Při rozdělení původní váhy mezi kopie zůstanou všechna skóre váženého součtu stejná. Vynásobení všech vah stejným kladným číslem pořadí zachová. [Zkouška duplicitního zdroje](https://sapien1.com/cs/research/replay-hybrid-search-ranking-evidence/evidence.html#source-duplication)

Příklad kombinuje délku vstupních seznamů a duplikaci. Vždy zahrnuje celý lexikální seznam `A, C, B, D` s vahou jedna. Každý sémantický seznam bere první výsledky z `B, A, D, C` a má také váhu jedna. Konstanta pořadí je 60. Pokud je přítomen druhý sémantický seznam, je přesnou kopií prvního. [Kombinovaná zkouška](https://sapien1.com/cs/research/replay-hybrid-search-ranking-evidence/evidence.html#combined-replay)

| Zahrnuté pozice v každém sémantickém seznamu | Jeden sémantický seznam | Dva totožné sémantické seznamy |
| ---: | --- | --- |
| 1 | B | B |
| 2 | A | B |

Při přechodu z levého horního do pravého dolního pole zůstává B první, ačkoli se mění limit i počet seznamů. Změna jediného nastavení v každém kroku ukáže, že delší seznam posune do čela A a přičtení kopie vrátí na první místo B.

## Ověřte, kterým ID se příspěvky přičítají

Pokud vyhledáváte úryvky a zobrazujete dokumenty, zapište, ke kterému dokumentu každý úryvek patří a kdy je seskupujete. V příkladu vede v každém zdroji jiný úryvek z A. Stejný úryvek z B je v obou zdrojích druhý. Seskupení podle dokumentu v každém zdroji před sloučením řadí A první. Sloučení podle úryvků a následný výběr úryvku s nejvyšším skóre z každého dokumentu řadí B první. Oba výsledky obsahují stejné čtyři dokumenty. [Zkouška seskupení úryvků](https://sapien1.com/cs/research/replay-hybrid-search-ranking-evidence/evidence.html#passage-grouping)
