Hacktoberfest 2026:メンテナが10月に向けて印を付けた、オープンで初心者向けの issue。 Hacktoberfest の issue を見る

[Feature] Support data_parser in kv_batch_get_by_meta

オープン 初心者向け
#194 コメント 0 件 リアクション 0 件 担当者 0 名 GitHub で見る

メンテナーはふだん 1 日以内に返信

まだ誰も着手していません。

評価

難易度
2/5
見積もり時間
1〜3時間
初心者へのやさしさ
72/100
issue の種類
機能追加
明瞭さ
明確に書かれている
活発さ
活発
技術スタック
python
領域
data

調査の方向性

_by_meta ラッパーは transfer_queue/interface.py にあります。kv_batch_get_by_meta とその非同期版から始め、その後、すでに data_parser と parser_args を受け取る既存の kv_batch_get のシグネチャを確認してください。2つのパラメータを _by_meta のシグネチャに追加し、async_kv_batch_get に転送してください。その際、parser_args と meta.keys の対応関係を維持してください。issue の例の呼び出しが実行でき、e2e テストが _by_meta のパスをカバーしていれば完了です。

索引モデルが issue の本文から書いたものです。

説明

Background

#191 added data_parser / parser_args to kv_batch_get and async_kv_batch_get. The _by_meta variants were left out of that PR.

Problem

kv_batch_put returns a KVBatchMeta, and kv_batch_get_by_meta is the natural way to read those samples back, but it does not accept a parser:

meta = tq.kv_batch_put(keys=keys, partition_id="train", fields=fields)
data = tq.kv_batch_get_by_meta(meta, select_fields="input_ids", data_parser=trim, parser_args=lengths)
# TypeError: kv_batch_get_by_meta() got an unexpected keyword argument 'data_parser'

Callers have to unpack the meta and call kv_batch_get(keys=meta.keys, partition_id=meta.partition_id, ...) instead.

Proposal

  • Add data_parser and parser_args to kv_batch_get_by_meta and async_kv_batch_get_by_meta, with the same contract as kv_batch_get; parser_args is aligned with meta.keys.
  • Forward both to async_kv_batch_get, which the _by_meta variants already call and which already handles the parser, including the parser_args checks.
  • Cover the _by_meta path in the existing e2e test for the get-side data_parser.

Related PR: #191

主要言語
Python
スター
168
フォーク
56
平均マージ
2日 13時間
マージ済み PR(30日)
16

環境構築

このプロジェクトには開発コンテナ、Dockerfile、コントリビューションガイドがありません。まず README を読み、一般的な手順ははじめてのコントリビューションガイドを参照してください。

はじめの一歩

  1. issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
  2. 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
  3. リポジトリをフォークし、ブランチを切って変更します。
  4. issue 番号を参照したプルリクエストを送ります。

Ascend/TransferQueue のほかの issue

Ascend/TransferQueue の issue をすべて見る

似ている issue

Python の issue をもっと見る

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。