Feature request: provider-native model listing, required-header validation, and non-chat endpoints (Anthropic / Gemini)
Maintainer thường phản hồi trong vòng 1 ngày
@jpr5 đang làm issue này rồi.
Từ ngày 12/10/2026.
Đánh giá
- Độ khó
- 5/5
- Thời gian dự kiến
- Hơn một tuần
- Mức phù hợp với người mới
- 14/100
- Loại issue
- Tính năng
- Độ rõ ràng
- Khá rõ ràng
- Mức độ hoạt động
- Sôi nổi
- Công nghệ
- bun, typescript
- Lĩnh vực
- api, testing-qa
Hướng nghiên cứu
The payload names no source files, so start by locating how the existing GET /v1/models route and strict mode are handled in the aimock repository. The request bundles four separate features (provider-native model listings, required-header checks, extra endpoints, and cache usage fields), so the first step is to agree with maintainers on which part to take. Done means one scoped part works under strict mode with a test that fails without the change.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Mô tả
Context
We use aimock (1.44.0, strict mode, in a Bun test suite) to test an app that talks to user-configured providers in four formats: OpenAI Chat Completions, OpenAI Responses, Anthropic Messages and Gemini. Generation goes through the Vercel AI SDK and aimock covers it well. The gaps we hit are the calls around generation, which our app makes with plain fetch.
A concrete miss: our model-discovery call to an Anthropic endpoint sent x-api-key but no anthropic-version. The real API answers that with
{"type":"error","error":{"type":"invalid_request_error","message":"anthropic-version: header is required"}}
(HTTP 400), but our aimock-backed tests passed, so we only found it with a real key.
What we would like
-
Provider-native model listing. Today
GET /v1/modelsreturns one OpenAI-shaped list ({object: "list", data: [{id, object: "model", owned_by}]}) to every client, and there is noGET /v1beta/models. It would help to have:- Anthropic
GET /v1/modelsin its own shape (data[{type: "model", id, display_name, created_at}],has_more,first_id,last_id), withlimit/after_idpaging, selected e.g. by the presence ofanthropic-versionorx-api-key. - Gemini
GET /v1beta/models(models[{name: "models/…", displayName, inputTokenLimit, outputTokenLimit, supportedGenerationMethods}],nextPageToken). - Paging that can be forced from fixtures or options (e.g. a small page size), so clients that ignore
has_more/nextPageTokenfail in tests.
- Anthropic
-
Required-header validation under strict mode. On Anthropic routes (
/v1/messages,/v1/models), reject a request withoutanthropic-versionwith the real 400 body above. More generally, strict mode could enforce each provider's documented required headers, since that is exactly the class of rule an SDK-based happy path never exercises. -
Other non-generation endpoints, so they can be tested next to chat:
- Anthropic
GET /v1/models/{model_id}andPOST /v1/messages/count_tokens. - Gemini
GET /v1beta/models/{model}andPOST /v1beta/models/{model}:countTokens.
- Anthropic
-
Anthropic prompt-cache usage in fixtures. As far as we can tell, an Anthropic fixture cannot return
cache_creation_input_tokens,cache_read_input_tokensor thecache_creation.ephemeral_5m_input_tokens/ephemeral_1h_input_tokensbreakdown. Being able to set these (or having replay serve recorded values) would let us test cost and context accounting for cached prompts without a live key.
Happy to provide more detail or test a pre-release. Thanks for aimock.
- Ngôn ngữ chính
- TypeScript
- Star
- 979
- Fork
- 84
- Merge trung bình
- 1 ngày 5 giờ
- Pull request đã merge (30 ngày)
- 75
Chuẩn bị môi trường
- Có Dockerfile hoặc tệp Docker Compose
- Không có mẫu pull request
- Không có hướng dẫn đóng góp
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của CopilotKit/aimock
-
Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 58/100
CopilotKit/aimock#549 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Feature: model-generated files (inline images) in chat/responses turnsCó thể đã có người làm @abhiaiyer91 đã nhận 4 ngày trước. Đang mở
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100
CopilotKit/aimock#548 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Feature: scriptable citations / annotations on text responsesCó thể đã có người làm @abhiaiyer91 đã nhận 4 ngày trước. Đang mở
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100
CopilotKit/aimock#547 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Dependency DashboardĐang mở
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 10/100
CopilotKit/aimock#289 ·
Maintainer thường phản hồi trong vòng 1 ngày
Tất cả issue của CopilotKit/aimock
Issue tương tự
-
agent/scanner help wanted hive/claimed-by-scanner kind/bug stage/020-claimed
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 90/100
hivecommons/rationguard#315 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
agent-ready area: ui-sdk priority: p3 type: chore
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 76/100
schlessera/brain-kit#2534 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
bug lane:gh-5
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 72/100
LLM-4-People/bridlewise-testing#122 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
bug priority: P2
Độ khó 1/5 Dưới một giờ Mức phù hợp với người mới 78/100
Maintainer thường phản hồi trong vòng 1 ngày
-
enhancement priority:low ready-for-dev
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 67/100
Maintainer thường phản hồi trong vòng 1 ngày