Примеры воспроизведения порядка результатов гибридного поиска

Объединение по обратным рангам, или RRF, объединяет упорядоченные результаты поиска, начисляя элементу баллы за каждый список, в котором он встречается. В этих примерах используются вымышленные порядки результатов и точные вычисления. Оригинальная статья об RRF

Скачать пять файлов для повторного запуска и сохранённые результаты (ZIP). Распакуйте файлы и следуйте инструкциям в README, чтобы запустить их с помощью Python 3.

Сколько результатов передал каждый поиск?

Если сохранить два результата одного поиска вместо одного, A получит дополнительные баллы и окажется впереди B. Все элементы останутся в объединённом списке. Если после полного объединения ограничить выдачу одним результатом, в ней останется A. Ограничение входных списков определяет начисляемые баллы. Ограничение итоговой выдачи определяет, что увидит читатель.

На что влияет константа ранга?

A дважды занимает первое место. B один раз занимает первое место и дважды — двенадцатое. При положительном значении константы меньше 10 A лидирует, при значении 10 баллы A и B равны, а при значении больше 10 A уступает B. При повторном запуске используйте то же правило разрешения ничьих.

Был ли список результатов поиска учтён дважды?

Во взвешенной сумме включение точной копии списка с собственным полным весом даёт тот же результат, что и добавление этого веса к весу исходного списка. Если разделить исходный вес между двумя копиями, баллы каждого элемента сохранятся. Умножение всех весов на один и тот же положительный коэффициент сохраняет порядок элементов.

Что происходит при изменении обоих параметров?

Список на основе слов: A, C, B, D. Список на основе смысла: B, A, D, C. Вес каждого включённого списка равен 1, а константа ранжирования — 60. При глубине 1 побеждает B, независимо от того, учитывается список на основе смысла один или два раза. При глубине 2 побеждает A, если этот список учитывается один раз, и B, если два раза. Если сравнить только первую и последнюю конфигурации, в обеих победит B. При повторном запуске меняйте по одному условию за раз, чтобы увидеть причину различия.

Когда отрывки объединяются в документы?

Два разных отрывка из документа A занимают первые места в двух списках результатов поиска. Один и тот же отрывок из B занимает второе место в обоих списках. Если сгруппировать отрывки по документам до объединения списков, на первое место выйдет A. Если объединить списки по отрывкам, а затем ранжировать каждый документ по его отрывку с наибольшим количеством баллов, на первое место выйдет B. Оба результата содержат одни и те же 4 документа.