Add support for utoken tokenizer

オープン

#2 2021年11月4日に作成コメント 2 件リアクション 0 件担当者 0 名 GitHub で見る

まだ誰も着手していません。

評価

ファイルやテストは指定されていません。まず Tokenizer インターフェースと sacremoses をモデルにした既存の実装を見つけ、次に utoken の API を確認してください。このインターフェースを通じて Machine が動作する utoken 実装を提供できれば完了です。

索引モデルが issue の本文から書いたものです。

utoken is a general-purpose word tokenizer, in the spirit of sacremoses. Machine can provide a utoken implementation of the tokenizer interface.

このリポジトリのコントリビューションガイドは索引されていません

Port 'Add agent guidance, review rules, and a comment-hygiene gate' オープン

porting

難易度 4/5 3〜5日初心者へのやさしさ 45/100

sillsdev/machine.py#375 · 担当者 1 名 · 2026年9月18日に作成
Port additional changes made to 'Port transductive alignment model' オープン

難易度 4/5 3〜5日初心者へのやさしさ 45/100

sillsdev/machine.py#372 · 2026年9月16日に作成
Marker placement does not occur in verse ranges オープン

invalid

sillsdev/machine.py#370 · 担当者 1 名 · 2026年9月15日に作成
Versification.load gives an error when a custom.vrs contains duplicate verse definitions. オープン

難易度 3/5 1〜2日初心者へのやさしさ 72/100

sillsdev/machine.py#373 · 2026年9月15日に作成
Port 'Convert USFM versification' オープン

porting

難易度 4/5 3〜5日初心者へのやさしさ 55/100

sillsdev/machine.py#369 · 2026年9月14日に作成

[Bug] reef-hermes tells me to resume with hermes --resume, which does not work from my shell オープン

area: harness bug status: needs-triage

難易度 2/5 1〜3時間初心者へのやさしさ 75/100

Human-Agent-Society/reef#625 · 2026年9月24日に作成
Bump transitive axios to >=1.18.0 to address GHSA-hcpx-6fm6-wx23 オープン

難易度 2/5 1〜3時間初心者へのやさしさ 70/100

coinbase/cdp-sdk#828 · 2026年9月24日に作成
AccessibleResourceCard/AccessibleChannelCard crash when a resource has more than one learning activity (getActivityTags returns an object instead of an array) オープン

難易度 1/5 1時間未満初心者へのやさしさ 80/100

learningequality/kolibri#15351 · コメント 2 件 · 2026年9月24日に作成
audeer.path(): optionally expand environment variables オープン

難易度 2/5 1〜3時間初心者へのやさしさ 75/100

audeering/audeer#212 · コメント 1 件 · 2026年9月24日に作成
Name consistency オープン

難易度 2/5 1〜3時間初心者へのやさしさ 75/100

eellak/triplestore#65 · コメント 1 件 · 2026年9月24日に作成