# Jak odtworzyć wynik scalania rankingów metodą RRF

Aby odtworzyć wynik scalania rankingów metodą odwrotności pozycji (RRF), zacznij od uporządkowanej listy, którą każde źródło rzeczywiście przekazało do scalenia. Zapisz te listy, stałą rankingu, wagi źródeł i identyfikatory użyte do grupowania. Identyfikatory kandydatów lub nawet pierwszy wynik mogą pozostać takie same, mimo że zmienią się dane użyte do obliczania punktów. [Wzór RRF](https://cormack.uwaterloo.ca/cormack/cormacksigir09-rrf.pdf)

## Porównaj wkład każdej listy

Zapisz, ile wyników uwzględniono z każdego źródła i ile pokazano na końcu. Limity te działają na różnych etapach. W fikcyjnym przykładzie wydłużenie jednej listy z jednego wyniku do dwóch dodaje A punkty z drugiego źródła. A wyprzedza wtedy B. Wszyscy kandydaci nadal są w połączonym zbiorze. Gdy ograniczysz wynik do jednej pozycji po pełnym scaleniu, A nadal jest pierwszy. [Próba z różną długością listy](https://sapien1.com/pl/research/replay-hybrid-search-ranking-evidence/evidence.html#input-depth)

Dla każdego kandydata blisko progu sprawdź uwzględnioną pozycję i punkty z każdego źródła. Kandydat może stracić punkty z jednej listy i pozostać w zbiorze dzięki innej.

## Sprawdź stałą rankingu i faktyczne wagi

Jeśli pozycje na wejściu są zgodne, powtórz obliczenia z użyciem stałej rankingu i wag źródeł. W przykładzie z trzema listami A zajmuje dwa pierwsze miejsca. B jest raz pierwszy i dwa razy dwunasty. Dla dodatniej stałej poniżej 10 prowadzi A, przy 10 remisuje z B, a powyżej 10 przegrywa. Zapisz zasadę rozstrzygania remisów, jeśli może wpłynąć na wynik. [Próba ze stałą rankingu](https://sapien1.com/pl/research/replay-hybrid-search-ranking-evidence/evidence.html#rank-constant)

Sprawdź, ile razy lista każdego źródła została uwzględniona. Zaliczenie dokładnej kopii z pełną wagą działa tak samo jak dodanie tej wagi do oryginału. Podział pierwotnej wagi między kopie zachowuje wszystkie wyniki sumy ważonej. Pomnożenie wszystkich wag przez ten sam dodatni czynnik zachowuje kolejność. [Próba z kopią źródła](https://sapien1.com/pl/research/replay-hybrid-search-ranking-evidence/evidence.html#source-duplication)

Przykład łączy długość listy wejściowej z jej powieleniem. Pełna lista leksykalna `A, C, B, D` zawsze ma wagę jeden. Każda lista semantyczna bierze pierwsze wyniki z `B, A, D, C` i także ma wagę jeden. Stała rankingu wynosi 60. Jeśli użyto drugiej listy semantycznej, jest dokładną kopią pierwszej. [Próba łączona](https://sapien1.com/pl/research/replay-hybrid-search-ranking-evidence/evidence.html#combined-replay)

| Uwzględnione pozycje na listę semantyczną | Jedna lista semantyczna | Dwie identyczne listy semantyczne |
| ---: | --- | --- |
| 1 | B | B |
| 2 | A | B |

Po przejściu z górnego lewego pola do dolnego prawego B nadal jest pierwszy, choć zmieniają się limit i liczba list. Zmieniając po jednym ustawieniu, widać, że wydłużenie listy wysuwa A na prowadzenie, a zaliczenie kopii przywraca B na pierwsze miejsce.

## Sprawdź, do których ID trafiają punkty

Jeśli wyszukujesz fragmenty, a wyświetlasz dokumenty, zapisz, do którego dokumentu należy każdy fragment i kiedy odbywa się grupowanie. W przykładzie dwa różne fragmenty A są pierwsze w dwóch źródłach. Ten sam fragment B jest drugi w obu. Grupowanie według dokumentu w każdym źródle przed scaleniem daje A pierwsze miejsce. Scalenie według fragmentów i pozostawienie najwyżej ocenionego fragmentu z każdego dokumentu daje pierwsze miejsce B. Oba wyniki obejmują te same cztery dokumenty. [Próba grupowania fragmentów](https://sapien1.com/pl/research/replay-hybrid-search-ranking-evidence/evidence.html#passage-grouping)
