Gemini 3.8 Flash is missing from listModels() and silently falls back to Claude Sonnet 5
Chưa có ai nhận issue này.
Đánh giá
- Độ khó
- 4/5
- Thời gian dự kiến
- 3-5 ngày
- Mức phù hợp với người mới
- 45/100
- Loại issue
- Lỗi
- Độ rõ ràng
- Khá rõ ràng
- Mức độ hoạt động
- Sôi nổi
- Công nghệ
- javascript, node.js
Hướng nghiên cứu
Bắt đầu với repro.mjs được cung cấp, sau đó lần theo client.listModels(), session.rpc.model.list({ skipCache: true }), session.rpc.model.getCurrent() và sự kiện assistant.usage. So sánh việc phát hiện và dispatch model trong SDK/server-mode với hành vi của CLI độc lập; hoàn tất khi các model được yêu cầu, được chọn và thực sự được sử dụng nhất quán với nhau hoặc fallback được báo cáo rõ ràng.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Mô tả
Summary
With @github/copilot-sdk@1.0.13, the Copilot-hosted model gemini-3.8-flash is absent from client.listModels(). However, client.createSession({ model: "gemini-3.8-flash" }) succeeds, and session.rpc.model.getCurrent() reports that Gemini is selected.
When a prompt is sent, the authoritative assistant.usage event reports that the request actually used claude-sonnet-5.
This results in three conflicting states:
listed: false
selected: gemini-3.8-flash
used: claude-sonnet-5
There is no error or warning indicating that the requested model was unavailable or that fallback occurred.
Environment
@github/copilot-sdk:1.0.13- Bundled Copilot CLI/runtime:
1.0.83 - Node.js:
v22.17.0 - npm:
11.6.2 - OS: Windows NT
10.0.26200.0 - Authentication: Explicit GitHub token for a Copilot-enabled user
- Provider: GitHub Copilot-hosted models, not BYOK
- Model:
gemini-3.8-flash
This was reproduced with two separately authenticated GitHub accounts.
Minimal reproduction
Install the current stable SDK:
npm install @github/copilot-sdk@1.0.13
Save the following as repro.mjs:
import { CopilotClient } from "@github/copilot-sdk";
const requestedModel = "gemini-3.8-flash";
const gitHubToken = process.env.GITHUB_TOKEN ?? process.env.GH_TOKEN;
if (!gitHubToken) {
throw new Error("Set GITHUB_TOKEN or GH_TOKEN.");
}
const client = new CopilotClient({
gitHubToken,
useLoggedInUser: false,
});
let session;
try {
await client.start();
const models = await client.listModels();
console.log(
"listed:",
models.some(({ id }) => id === requestedModel),
);
session = await client.createSession({
model: requestedModel,
});
const current = await session.rpc.model.getCurrent();
console.log("selected:", current.modelId);
let actualModel;
session.on("assistant.usage", ({ data }) => {
actualModel = data.model;
});
const response = await session.sendAndWait(
"Reply with exactly OK.",
120_000,
);
console.log("used:", actualModel);
console.log("response:", response?.data.content);
} finally {
await session?.disconnect();
await client.stop();
}
Run it:
node repro.mjs
Actual result
listed: false
selected: gemini-3.8-flash
used: claude-sonnet-5
response: OK
The session-scoped model catalog also omits Gemini when queried with cache bypass:
const result = await session.rpc.model.list({ skipCache: true });
Expected result
One of the following would be consistent behavior:
- If
gemini-3.8-flashis available, it should be returned by the model-list APIs and used for the request. - If it is unavailable in the SDK/server-mode context, session creation or model switching should fail with a clear error.
- If automatic fallback is intentional, the SDK should surface it explicitly, and
getCurrent()should report the effective model rather than the unavailable requested model.
At minimum, session.rpc.model.getCurrent() and assistant.usage.data.model should not disagree without an accompanying model-change or fallback notification.
Additional observations
client.listModels()returned 21 models, with no Gemini models.session.rpc.model.list({ skipCache: true })returned 20 models, also with no Gemini models.- The same behavior remained after explicitly enabling Gemini 3.8 Flash in the applicable Copilot model policy and waiting for the setting to propagate.
- Standalone Copilot CLI
1.0.83can usegemini-3.8-flashsuccessfully, and its usage data identifies Gemini as the actual model. - This suggests a difference between standalone CLI startup model resolution and SDK/server-mode model discovery or dispatch.
- The issue is reproducible on a clean temporary Node.js project using the published SDK package.
- Ngôn ngữ chính
- Java
- Star
- 10.5k
- Fork
- 1.5k
- Merge trung bình
- 1 ngày 9 giờ
- Pull request đã merge (30 ngày)
- 131
Hướng dẫn đóng góp
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của github/copilot-sdk
-
agentic-workflows
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 68/100
github/copilot-sdk#2709 · 1 bình luận ·
-
Độ khó 1/5 Dưới một giờ Mức phù hợp với người mới 78/100
github/copilot-sdk#2673 ·
-
bug testing
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 75/100
github/copilot-sdk#2628 ·
-
agentic-workflows
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 68/100
github/copilot-sdk#2627 · 1 bình luận ·
-
agentic-workflows
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 74/100
github/copilot-sdk#2493 ·
Tất cả issue của github/copilot-sdk
Issue tương tự
-
awaiting triage bug Causes friction Hop Gui P1 P2 Transforms
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 75/100
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 75/100
apache/flink-agents#1152 ·
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 75/100
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 70/100
jenkinsci/blueocean-plugin#5417 ·
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 75/100
objectionary/eo-graphs#75 ·