lancedb/lancedb

Feature: openai embedding function returns None if the result is not valid

Open

#1677 aperta il 20 set 2024

Vedi su GitHub
 (1 commento) (0 reazioni) (0 assegnatari)HTML (876 fork)batch import
enhancementgood first issuehelp wanted

Metriche repository

Star
 (10.303 star)
Metriche merge PR
 (Merge medio 2g 17h) (82 PR mergiate in 30 g)

Descrizione

SDK

Python

Description

Be able to handle error easier, we can

  1. Set the return embedding as None
  2. logging the line where it is error.
  3. Allow user either drop the row or store the row with None embedding, so users can later to rerun the ingestion with filter vector_column == null

Guida contributor

Direzione di ricerca
Ispeziona l'implementazione corrente della funzione di embedding OpenAI nell'SDK Python, individua dove viene convalidato il risultato e aggiungi la logica per restituire None in caso di risultato non valido, registrare la riga di errore e fornire un'opzione di configurazione per eliminare la riga o memorizzarla con embedding None per una successiva re ingestione.
Tech stack
python
Dominio
backenddatabase
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
2
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
1-3 ore
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
Python
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
75