Nghiên cứu
Cách tái lập kết quả hợp nhất thứ hạng nghịch đảo
Để tái lập kết quả hợp nhất thứ hạng nghịch đảo (RRF), hãy bắt đầu từ danh sách đã xếp thứ tự mà mỗi nguồn thực sự đưa vào bước hợp nhất. Lưu các danh sách đó cùng hằng số thứ hạng, trọng số nguồn và ID dùng để gom nhóm. Các ID ứng viên hoặc vị trí dẫn đầu có thể giữ nguyên dù dữ liệu dùng để tính điểm đã thay đổi. Công thức RRF
So sánh phần đóng góp của từng danh sách
Ghi số kết quả giữ lại từ từng nguồn và số kết quả tối đa ở đầu ra. Hai giới hạn áp dụng ở hai bước khác nhau. Trong một ví dụ giả định, tăng một danh sách đầu vào từ một lên hai kết quả giúp A có thêm điểm từ nguồn thứ hai và vượt B. Mọi ứng viên vẫn nằm trong tập hợp nhất. Nếu chỉ giới hạn đầu ra còn một kết quả sau khi đã hợp nhất đầy đủ, kết quả vẫn là A. Chạy lại với độ sâu đầu vào khác nhau
Với mỗi ứng viên gần ngưỡng, hãy so sánh vị trí được giữ lại và phần điểm từ từng nguồn. Ứng viên có thể mất điểm từ một danh sách nhưng vẫn có mặt nhờ danh sách khác.
Kiểm tra hằng số thứ hạng và trọng số thực tế
Nếu thứ hạng đầu vào giống nhau, hãy tính lại với hằng số thứ hạng và trọng số nguồn. Trong một ví dụ có ba danh sách, A có hai vị trí đầu bảng. B đứng đầu một lần và đứng thứ mười hai hai lần. A dẫn trước khi hằng số dương nhỏ hơn 10, bằng điểm B ở 10 và tụt lại khi hằng số lớn hơn 10. Lưu quy tắc phân định thứ tự nếu điểm bằng nhau có thể ảnh hưởng đến đầu ra. Chạy lại với các hằng số thứ hạng
Kiểm tra mỗi danh sách nguồn được tính bao nhiêu lần. Tính một bản sao giống hệt với đầy đủ trọng số có tác dụng như cộng trọng số đó vào danh sách gốc. Chia trọng số gốc cho các bản sao sẽ giữ nguyên mọi điểm trong phép cộng có trọng số. Nhân mọi trọng số với cùng một hệ số dương giữ nguyên thứ tự. Chạy lại với nguồn bị lặp
Ví dụ này kết hợp độ sâu đầu vào với việc tính bản sao. Danh sách tìm theo từ khóa A, C, B, D luôn được dùng đầy đủ với trọng số một. Mỗi danh sách ngữ nghĩa lấy các vị trí đầu của B, A, D, C, cũng với trọng số một. Hằng số thứ hạng là 60. Nếu có danh sách ngữ nghĩa thứ hai, đó là bản sao y hệt danh sách thứ nhất. Chạy lại phép thử kết hợp
| Số vị trí giữ lại trong mỗi danh sách ngữ nghĩa | Một danh sách ngữ nghĩa | Hai danh sách ngữ nghĩa giống hệt nhau |
|---|---|---|
| 1 | B | B |
| 2 | A | B |
Từ ô trên bên trái đến ô dưới bên phải, B vẫn đứng đầu dù giới hạn và số danh sách đều đổi. Chỉ đổi một thiết lập mỗi lần sẽ thấy việc lấy thêm kết quả đưa A lên đầu, rồi tính thêm bản sao đưa B trở lại vị trí dẫn đầu.
Kiểm tra ID nào nhận điểm đóng góp
Nếu tìm đoạn văn nhưng trả về tài liệu, hãy ghi lại mỗi đoạn thuộc tài liệu nào và gom nhóm ở bước nào. Trong một ví dụ, mỗi nguồn đặt một đoạn khác nhau của A ở vị trí đầu. Cùng một đoạn của B đứng thứ hai ở cả hai. Gom theo tài liệu trong từng nguồn trước khi hợp nhất đưa A lên đầu. Hợp nhất theo đoạn rồi giữ đoạn có điểm cao nhất cho mỗi tài liệu đưa B lên đầu. Hai đầu ra đều có cùng bốn tài liệu. Chạy lại cách gom đoạn văn