Storia-AI/sage

Feature request: Implement reciprocal rank fusion for combining multiple retriever outputs

Aperta

#55 aperta il 4 ott 2024

Vedi su GitHubGuida contributor
 (5 commenti) (0 reazioni) (1 assegnatario)Python (116 fork)auto 404
good first issuehacktoberfest🔥 difficulty: 1

Metriche repository

Star
 (1267 stelle)
Metriche merge PR
 (Metriche PR in attesa)

Descrizione

Right now when we are combining the outputs of a bm25 encoder and a dense retriever we simply do a weighted average of their scores. It's more standard to use reciprocal rank fusion methods to combine multiple scores.

We should implement this alternative hybrid scoring method

Guida contributor

Direzione di ricerca
Ricerca l'algoritmo di fusione del rango reciproco (RRF), comprendi come combina le liste classificate da diversi recuperatori e implementalo come metodo di punteggio ibrido alternativo alla media ponderata esistente. Fai riferimento alla documentazione Microsoft collegata e testa con dati di esempio.
Tech stack
python
Dominio
backend
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
2
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Mezza giornata
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
PythonInformation Retrieval basics
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
65