BM25 sıralamasını yeniden elde etmek için örnekler
Bu örneklerde kurgusal belgeler ve sorgular kullanılıyor. Örnekler, puanlamaya temel olan koleksiyon değiştiğinde aynı adayların nasıl farklı puanlar alabildiğini ve bir adayın ilk seçimde elenebildiğini gösteriyor. Hesaplamalar belirtilen sürümdeki rank-bm25 koduna dayanıyor.
Beş betiği ve kaydedilmiş sonuçları indirin (ZIP). README dosyası, Python paketlerinin belirtilen sürümlerini nasıl kuracağınızı ve test sonuçlarını nasıl karşılaştıracağınızı açıklar.
Ortalama belge uzunluğu nasıl değişti?
Sorgudaki hiçbir terimi içermeyen bir belge eklemek bile puanları hesaplamakta kullanılan ortalama uzunluğu değiştirebilir. Bu örnekte ortalama 18 belirtecin altındayken A öndedir, 18'de B ile aynı puanı alır ve 18'in üstünde geride kalır. Uzunluk düzeltmesinin kapalı olduğu kontrol testinde B her durumda öndedir.
Hangi belgeler terim ağırlıklarını değiştirdi?
Dokuz kurgusal belgeden oluşan koleksiyonda A, red ile ve B, blue ile eşleşir. Diğer belgelerdeki iki düzenleme red içeren belge sayısını ikiden dörde çıkarır. blue içeren belge sayısı üçte kalır. Önce A öndedir. İlk düzenlemeden sonra B ile aynı puanı alır, ikinciden sonra geride kalır. Adaylar ve dört belirteçlik ortalama uzunluk değişmez.
Her dizin bölümünde hangi belgeler hesaba katıldı?
18 belgeli bu örnekte her dizin bölümü kendi puanlama istatistiklerini kullandığında, bölümler arasında diğer belgelerin iki kez takas edilmesi A ile B'nin sırasını tersine çevirir. Değişmeyen koleksiyonun tamamı üzerinden yapılan tek hesaplama, denenen tüm dağılımlarda B'ye daha yüksek puan verir. Elasticsearch arama API'si terim istatistiklerinin hangi bölümlerden alınabileceğini açıklar. Buradaki puanlar Python örneğinden gelir.
Hangi belgeler yeniden sıralamaya girdi?
18 belgeli ayrı bir örnekte tüm uygun adaylar puanlandığında sıra B, C, A olur. Yeniden sıralama, tüm koleksiyona göre hesaplanan bu puanları kullanmaya devam eder. İlk seçim, hangi adayların yeniden sıralamaya gireceğini belirler.
İlk seçim ve yeniden sıralama sonuçları
| İlk seçim | Başlangıçtaki son sıralama | Diğer belgeler iki kez takas edildikten sonraki son sıralama |
| Yerel BM25, bölüm başına bir aday | C, A | B, C |
| Yerel BM25, bölüm başına en fazla iki aday | B, C, A | B, C, A |
| Tüm koleksiyonda BM25, bölüm başına bir aday | B, C | B, C |