implement maximal_marginal_relevance method or call python?
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Idoneità per principianti
- 35/100
- Tipo di issue
- Funzionalità
- Chiarezza
- Da chiarire
- Stato di attività
- Ferma
- Stack tecnologico
- csharp, postgresql
- Ambito
- databases, machine-learning
Direzione di ricerca
Inizia da src/Postgres/src/PostgresVectorCollection.cs, in SearchAsync e nel relativo TODO MMR, quindi esamina la struttura dei risultati esistente di GetWithDistanceAsync e le impostazioni della ricerca vettoriale. Decidi come dovrebbe essere fornita la massima rilevanza marginale in questa implementazione C# per PostgreSQL; il lavoro è completato quando SearchAsync applica il comportamento MMR selezionato e restituisce la VectorSearchResponse prevista.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
var embeddingArray = embedding.ToArray();
var results = await _postgresDbClient
.GetWithDistanceAsync(
_collectionName,
embeddingArray,
_distanceStrategy,
limit: k,
withEmbeddings: true,
cancellationToken: cancellationToken)
.ConfigureAwait(false);
var mmrSelected = maximal_marginal_relevance(
embeddingArray,
results.Select(r => r.Item1.Embedding!),
k: k,
lambdaMult: lambdaMult);
var resultDocs = results
.Select((r, i) => (Record: r.Item1, Index: i))
.Where(v => mmrSelected.Contains(v.Index))
.Select(v => new Document(v.Record.Content, v.Record.Metadata));
return resultDocs;
namespace LangChain.Databases.Postgres;
/// <summary>
/// Postgres vector store (using <see href="https://github.com/pgvector/pgvector"/>)
/// <remarks>
/// required: CREATE EXTENSION IF NOT EXISTS vector
/// </remarks>
/// </summary>
public class PostgresVectorCollection(
PostgresDbClient client,
string name = VectorCollection.DefaultName,
string? id = null)
: VectorCollection(name, id), IVectorCollection
{
/// <inheritdoc />
public async Task<IReadOnlyCollection<string>> AddAsync(
IReadOnlyCollection<Vector> items,
CancellationToken cancellationToken = default)
{
items = items ?? throw new ArgumentNullException(nameof(items));
foreach (var item in items)
{
await client.UpsertAsync(
tableName: Name,
id: item.Id,
content: item.Text,
metadata: item.Metadata,
embedding: item.Embedding,
timestamp: DateTime.UtcNow,
cancellationToken: cancellationToken
).ConfigureAwait(false);
}
return items
.Select(i => i.Id)
.ToArray();
}
/// <inheritdoc />
public async Task<Vector?> GetAsync(string id, CancellationToken cancellationToken = default)
{
var record = await client.GetRecordByIdAsync(Name, id, withEmbeddings: false, cancellationToken).ConfigureAwait(false);
return record != null
? new Vector
{
Text = record.Content,
Metadata = record.Metadata,
}
: null;
}
/// <inheritdoc />
public async Task<bool> DeleteAsync(IEnumerable<string> ids, CancellationToken cancellationToken = default)
{
await client
.DeleteBatchAsync(Name, ids.ToList(), cancellationToken)
.ConfigureAwait(false);
return true;
}
/// <inheritdoc />
public async Task<VectorSearchResponse> SearchAsync(
VectorSearchRequest request,
VectorSearchSettings? settings = default,
CancellationToken cancellationToken = default)
{
request = request ?? throw new ArgumentNullException(nameof(request));
settings ??= new VectorSearchSettings();
var records = await client
.GetWithDistanceAsync(
Name,
request.Embeddings.First(),
settings.DistanceStrategy,
limit: settings.NumberOfResults,
cancellationToken: cancellationToken)
.ConfigureAwait(false);
// MMR
// TODO: implement maximal_marginal_relevance method or call python?
// var embeddingArray = embedding.ToArray();
// var results = await _postgresDbClient
// .GetWithDistanceAsync(
// _collectionName,
// embeddingArray,
// _distanceStrategy,
// limit: k,
// withEmbeddings: true,
// cancellationToken: cancellationToken)
// .ConfigureAwait(false);
//
// var mmrSelected = maximal_marginal_relevance(
// embeddingArray,
// results.Select(r => r.Item1.Embedding!),
// k: k,
// lambdaMult: lambdaMult);
//
// var resultDocs = results
// .Select((r, i) => (Record: r.Item1, Index: i))
// .Where(v => mmrSelected.Contains(v.Index))
// .Select(v => new Document(v.Record.Content, v.Record.Metadata));
//
// return resultDocs;
return new VectorSearchResponse
{
Items = records
.Select(r => new Vector
{
Text = r.Item1.Content,
Metadata = r.Item1.Metadata,
Distance = r.Item2,
})
.ToArray(),
};
}
/// <inheritdoc />
public Task<bool> IsEmptyAsync(CancellationToken cancellationToken = default)
{
throw new NotImplementedException();
}
}
- Lingua principale
- C#
- Stelle
- 12
- Fork
- 8
- Metriche di merge delle PR
- Nessuna PR unita negli ultimi 30g
Guida per i contributori
Apri la guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di tryAGI/LangChain.Databases
-
enhancement
Difficoltà 5/5 Più di una settimana Idoneità per principianti 20/100
-
Weaviate does not work Apertabug dependencies documentation help wanted
Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100
tryAGI/LangChain.Databases#53 · 6 commenti ·
-
use async methods Apertatodo
Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100
-
review way to map metadata Apertatodo
Difficoltà 3/5 1-2 giorni Idoneità per principianti 35/100
-
todo
Difficoltà 2/5 1-3 ore Idoneità per principianti 35/100
Tutte le issue di tryAGI/LangChain.Databases
Issue simili
-
effort:S P3 refactor
Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100
nightscout/nocturne#1532 ·
-
core dependencies
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 80/100
-
documentation
Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100
-
C#/.NET Roslyn LSP Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 70/100
-
Suspicious code fragments Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100
DotNetNext/SqlSugar#1458 ·