sandtable-ai/sandtable

誰かが対応中かもしれないイシューは最後に並べています。 すべて日付順に表示

• world: an agent can pass an Object.prototype name such as toString as a tool argument without an error

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  priority:p2 type:bug

  難易度 1/5 1時間未満 初心者へのやさしさ 86/100

  sandtable-ai/sandtable#233 · 2026年10月20日 に作成

  メンテナーはふだん 1 日以内に返信

• init: --openapi skips OpenAPI 3.1 nullable scalars (`type: [string, "null"]`) as non-scalar

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:init type:bug

  難易度 2/5 1〜3時間 初心者へのやさしさ 82/100

  sandtable-ai/sandtable#232 · 2026年10月20日 に作成

  メンテナーはふだん 1 日以内に返信

• cli: piping output into head or less crashes with an EPIPE stack trace

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:cli good first issue priority:p2 type:bug

  難易度 2/5 1〜3時間 初心者へのやさしさ 88/100

  sandtable-ai/sandtable#214 · 2026年10月20日 に作成

  メンテナーはふだん 1 日以内に返信

• leaderboard: a corrupt results.json stops the board with a bare JSON error that doesn't name the file

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  good first issue priority:p2 type:bug

  難易度 2/5 1〜3時間 初心者へのやさしさ 72/100

  sandtable-ai/sandtable#209 · 2026年10月20日 に作成

  メンテナーはふだん 1 日以内に返信

• leaderboard: a quick check removes or overwrites the crashed/ run of a model that has no stored results

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  priority:p2 type:bug

  難易度 3/5 1〜2日 初心者へのやさしさ 67/100

  sandtable-ai/sandtable#208 · 2026年10月20日 に作成

  メンテナーはふだん 1 日以内に返信

• leaderboard: check every model's credentials and provider before the first trial

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル

  難易度 4/5 3〜5日 初心者へのやさしさ 56/100

  sandtable-ai/sandtable#194 · 2026年10月20日 に作成

  メンテナーはふだん 1 日以内に返信

• freight: booking a made-up load ID is reported as a rep-confirm violation

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:grading type:feature

  難易度 4/5 1〜2日 初心者へのやさしさ 48/100

  sandtable-ai/sandtable#163 · 2026年10月20日 に作成

  メンテナーはふだん 1 日以内に返信

• Answer-shaped docs pages: how-to questions and a glossary

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  type:docs

  難易度 2/5 1〜3時間 初心者へのやさしさ 67/100

  sandtable-ai/sandtable#73 · 2026年10月19日 に作成

  メンテナーはふだん 1 日以内に返信

• Rehearse Python agents in-process (LiveKit, Pipecat)

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:adapters priority:p2 type:feature

  難易度 5/5 1週間以上 初心者へのやさしさ 35/100

  sandtable-ai/sandtable#44 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Voice timing metrics spec: turn latency, barge-in and silence

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:voice priority:p2 type:feature

  難易度 4/5 3〜5日 初心者へのやさしさ 48/100

  sandtable-ai/sandtable#43 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Multi-session tasks and an outbox for side channels

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:grading priority:p2 type:feature

  難易度 4/5 3〜5日 初心者へのやさしさ 48/100

  sandtable-ai/sandtable#42 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Persona × condition matrix

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:grading priority:p2 type:feature

  難易度 4/5 3〜5日 初心者へのやさしさ 45/100

  sandtable-ai/sandtable#41 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Business metrics per task next to pass^k

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:report priority:p2 type:feature

  難易度 5/5 1週間以上 初心者へのやさしさ 42/100

  sandtable-ai/sandtable#40 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Grade call outcomes and dispositions

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:grading priority:p2 type:feature

  難易度 4/5 3〜5日 初心者へのやさしさ 45/100

  sandtable-ai/sandtable#39 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Frozen simulation clock and relative dates

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:grading priority:p2 type:feature

  難易度 5/5 1週間以上 初心者へのやさしさ 35/100

  sandtable-ai/sandtable#38 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Per-task world overrides and context (`given`)

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:grading priority:p1 type:feature

  難易度 4/5 3〜5日 初心者へのやさしさ 54/100

  sandtable-ai/sandtable#37 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Multi-round negotiation invariants: `max_count` and `monotonic`

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:grading priority:p1 type:feature

  難易度 5/5 1週間以上 初心者へのやさしさ 35/100

  sandtable-ai/sandtable#36 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Import Retell and ElevenLabs agent exports

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:init priority:p2 type:feature

  難易度 4/5 3〜5日 初心者へのやさしさ 48/100

  sandtable-ai/sandtable#35 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• `sandtable import`: draft a domain from a voice-agent platform config

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:init priority:p1 type:feature

  難易度 5/5 1週間以上 初心者へのやさしさ 38/100

  sandtable-ai/sandtable#34 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Flag stale tasks when the tools, tables or rules they depend on change

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:grading priority:p2 type:feature

  難易度 4/5 3〜5日 初心者へのやさしさ 45/100

  sandtable-ai/sandtable#33 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Customer sign-off report: rule → evidence → reliability

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:report priority:p1 type:feature

  難易度 5/5 1週間以上 初心者へのやさしさ 38/100

  sandtable-ai/sandtable#31 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Coverage: which rules and tools the suite actually exercises

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:report priority:p1 type:feature

  難易度 4/5 3〜5日 初心者へのやさしさ 48/100

  sandtable-ai/sandtable#30 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Failure attribution: agent, simulated user, task or infrastructure

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:grading priority:p1 type:feature

  難易度 5/5 1週間以上 初心者へのやさしさ 35/100

  sandtable-ai/sandtable#29 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Critical tasks that must pass every trial

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:grading priority:p1 type:feature

  難易度 3/5 1〜2日 初心者へのやさしさ 68/100

  sandtable-ai/sandtable#28 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Reliability verdicts: pass@k, flaky tasks, flip rate and confidence intervals

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:report priority:p1 type:feature

  難易度 5/5 1週間以上 初心者へのやさしさ 25/100

  sandtable-ai/sandtable#27 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Nested params: objects, arrays and nullable fields in tool schemas

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:adapters priority:p1 type:feature

  難易度 4/5 3〜5日 初心者へのやさしさ 52/100

  sandtable-ai/sandtable#26 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Argument matchers in `expect.called` and `expect.not_called`

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:grading priority:p1 type:feature

  難易度 3/5 1〜2日 初心者へのやさしさ 56/100

  sandtable-ai/sandtable#25 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Release workflow: publish to npm with provenance

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  priority:p1 type:chore

  難易度 4/5 3〜5日 初心者へのやさしさ 43/100

  sandtable-ai/sandtable#23 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Filter tasks by tag (`--tag refusal`)

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:cli good first issue priority:p2 type:feature

  難易度 2/5 1〜3時間 初心者へのやさしさ 65/100

  sandtable-ai/sandtable#21 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Add `$regex` to where clauses

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:grading good first issue priority:p2 type:feature

  難易度 2/5 1〜3時間 初心者へのやさしさ 78/100

  sandtable-ai/sandtable#20 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Export domains to tau-bench's format

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  priority:p2 type:feature

  難易度 4/5 3〜5日 初心者へのやさしさ 55/100

  sandtable-ai/sandtable#18 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Voice: rehearse phone agents over audio

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:voice priority:p2 type:feature

  難易度 5/5 1週間以上 初心者へのやさしさ 35/100

  sandtable-ai/sandtable#17 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• LLM-judged checks: calibrated criteria scored separately from pass/fail

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:grading priority:p2 type:feature

  難易度 5/5 1週間以上 初心者へのやさしさ 35/100

  sandtable-ai/sandtable#16 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Fault profiles for tools: timeouts, 429s, duplicate deliveries

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:grading priority:p2 type:feature

  難易度 5/5 1週間以上 初心者へのやさしさ 35/100

  sandtable-ai/sandtable#15 · コメント 1 件 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Black-box mode: serve the simulated world as REST and MCP

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:adapters priority:p1 type:feature

  難易度 5/5 1週間以上 初心者へのやさしさ 35/100

  sandtable-ai/sandtable#14 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• GitHub Action that comments pass^k deltas on pull requests

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:cli priority:p1 type:feature

  難易度 4/5 3〜5日 初心者へのやさしさ 48/100

  sandtable-ai/sandtable#13 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信

• Compare a run against a baseline (`--baseline results.json`)

  オープン

  ⋯この Issue の問題を報告

  • 何か問題がありますか？

  • すでに着手されている
  • 初心者向けではない
  • 古い・無効
  • その他…
  • 送信 キャンセル
  area:report priority:p1 type:feature

  難易度 4/5 3〜5日 初心者へのやさしさ 48/100

  sandtable-ai/sandtable#12 · 2026年10月18日 に作成

  メンテナーはふだん 1 日以内に返信