lancedb/lancedb

Feature: openai embedding function returns None if the result is not valid

Open

#1,677 opened on 2024年9月20日

GitHub で見る
 (1 comment) (0 reactions) (0 assignees)HTML (876 forks)batch import
enhancementgood first issuehelp wanted

Repository metrics

Stars
 (10,303 stars)
PR merge metrics
 (平均マージ 2d 17h) (30d で 82 merged PRs)

説明

SDK

Python

Description

Be able to handle error easier, we can

  1. Set the return embedding as None
  2. logging the line where it is error.
  3. Allow user either drop the row or store the row with None embedding, so users can later to rerun the ingestion with filter vector_column == null

コントリビューターガイド

調査方針
Python SDKのOpenAI埋め込み関数の現在の実装を調査し、結果を検証する場所を見つけ、無効な結果の場合にNoneを返し、エラー行をログに記録し、行をドロップするかNone埋め込みで保存して後で再取り込みできるようにする設定オプションを提供するロジックを追加します。
技術スタック
python
領域
backenddatabase
Issue 種別
機能
難度新しい貢献者にとっての実装難度です。1 は非常に小さな変更、5 は専門的な作業です。
2
推定時間経験ある貢献者が調査、実装、テスト、pull request 準備にかけるおおよその時間範囲です。
1-3時間
活動状況Issue が今どれだけ取り組みやすいかを示します。新しい、活発、古い、ブロック中、またはメンテナー入力待ちなどです。
アクティブ
明確さ期待される変更、受け入れ条件、次の手順がどれだけ明確かを示します。
明確
前提条件
Python
初心者向け度初回貢献者にどれだけ取り組みやすいかを 1-100 で推定したスコアです。
75