modelcontextprotocol/conformance

Voir sur GitHub

Conformance Tests for MCP

Étoiles: 127
Forks: 101
Issues débutants ouvertes: 2
Issues indexées: 56
Merge moyen: 4 j 7 h
PR mergées (30 j): 6

Langage dominant: TypeScript
Licence: Aucune donnée de licence
Dernier push GitHub: 11/9/2026
Dernière indexation: 20/9/2026
Guide de contribution: Guide de contribution
Code de conduite: Code de conduite
Labels débutants: Aucun label débutant indexé

Accessible aux débutants Tout

Ouverte Toutes

sep-2640.yaml is extracted at a pre-Final revision of the SEP Ouverte

bug

Difficulté 3/5 1-2 jours Accessibilité débutants 68/100

modelcontextprotocol/conformance#513 · Ouverte le 22/9/2026
alpha-12 please? Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 35/100

modelcontextprotocol/conformance#512 · Ouverte le 22/9/2026
Everything-server rejects valid _meta on stateful initialize Ouverte

Difficulté 3/5 1-2 jours Accessibilité débutants 76/100

modelcontextprotocol/conformance#506 · 1 commentaire · Ouverte le 18/9/2026
request-state-complete accepts tool-error results and completions missing its documented state-ok marker Ouverte

Difficulté 3/5 1-2 jours Accessibilité débutants 76/100

modelcontextprotocol/conformance#505 · 1 commentaire · Ouverte le 15/9/2026
Bound client-suite concurrency for timing-sensitive SSE checks Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 55/100

modelcontextprotocol/conformance#500 · Ouverte le 9/9/2026
Standardised test reporting Ouverte

enhancement

Difficulté 4/5 3-5 jours Accessibilité débutants 50/100

modelcontextprotocol/conformance#486 · 1 commentaire · Ouverte le 3/9/2026
tasks-lifecycle accepts completed status from its cancellable fixture Ouverte

Difficulté 2/5 1-3 heures Accessibilité débutants 35/100

modelcontextprotocol/conformance#485 · Ouverte le 3/9/2026
feat(tier-check): support configurable label taxonomy and aliases for Tier 1 repo checks Ouverte

enhancement

Difficulté 4/5 3-5 jours Accessibilité débutants 55/100

modelcontextprotocol/conformance#482 · Ouverte le 1/9/2026
Add server conformance for SEP-2350 scope challenges Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 68/100

modelcontextprotocol/conformance#480 · Ouverte le 31/8/2026
sep-2322 absent-resultType probe is an invalid stimulus on the 2026-07-28 wire it negotiates Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 48/100

modelcontextprotocol/conformance#475 · 1 commentaire · Ouverte le 30/8/2026
Add initial conformance tests for Resource AS of EMA Ouverte

enhancement

modelcontextprotocol/conformance#470 · 1 commentaire · 1 réaction · 1 personne assignée · Ouverte le 28/8/2026
Shift config of "known-sdks.ts" to SDK-side config file Ouverte

enhancement

Difficulté 4/5 3-5 jours Accessibilité débutants 48/100

modelcontextprotocol/conformance#460 · Ouverte le 17/8/2026
tier-check spec-tracking does not detect SDK releases published shortly before the spec release Ouverte

Difficulté 3/5 1-2 jours Accessibilité débutants 70/100

modelcontextprotocol/conformance#459 · Ouverte le 17/8/2026
feat: Allow fixed request headers in server conformance tests Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 55/100

modelcontextprotocol/conformance#453 · 2 commentaires · Ouverte le 13/8/2026
Expose expected-vs-emitted check coverage per scenario Ouverte

Difficulté 5/5 Plus d'une semaine Accessibilité débutants 48/100

modelcontextprotocol/conformance#451 · 2 commentaires · Ouverte le 10/8/2026
SEP-2243: safe-integer-range MUST is untested, and SDKs disagree on what it requires Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 48/100

modelcontextprotocol/conformance#445 · 1 commentaire · Ouverte le 5/8/2026
tier-audit docs coverage: evaluate the feature list against the spec revision an SDK targets Ouverte

Difficulté 3/5 1-2 jours Accessibilité débutants 72/100

modelcontextprotocol/conformance#441 · 1 commentaire · Ouverte le 4/8/2026
input-required-result: harness sends the literal string `"undefined"` as an inputResponses key when round 1 names no input requests Ouverte

Difficulté 3/5 1-2 jours Accessibilité débutants 76/100

modelcontextprotocol/conformance#440 · Ouverte le 4/8/2026
input-required-result: sampling/roots scenarios vs SEP-2577, and capability-check accepting no inputRequests Ouverte

Difficulté 3/5 1-2 jours Accessibilité débutants 58/100

modelcontextprotocol/conformance#439 · 1 commentaire · Ouverte le 3/8/2026
Cover CIMD-only client authorization with no DCR endpoint Ouverte

enhancement

Difficulté 4/5 3-5 jours Accessibilité débutants 58/100

modelcontextprotocol/conformance#437 · 1 commentaire · Ouverte le 2/8/2026
Add conformance scenario: logging/setLevel and log notifications Ouverte

Difficulté 3/5 1-2 jours Accessibilité débutants 67/100

modelcontextprotocol/conformance#435 · 3 commentaires · Ouverte le 2/8/2026
Add conformance scenario: progress notification edge cases Ouverte

Difficulté 3/5 1-2 jours Accessibilité débutants 70/100

modelcontextprotocol/conformance#434 · Ouverte le 2/8/2026
Add conformance scenario: notifications/cancelled Ouverte

Difficulté 3/5 1-2 jours Accessibilité débutants 68/100

modelcontextprotocol/conformance#433 · Ouverte le 2/8/2026
WIP: generic scenario steering — plumbing-only client scenarios shouldn't need per-SDK fixture handlers Ouverte

Difficulté 5/5 Plus d'une semaine Accessibilité débutants 25/100

modelcontextprotocol/conformance#431 · Ouverte le 31/7/2026
WARNING severity is inconsistent between client and server runners (client warnings can block Tier 1, server warnings cannot) Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 52/100

modelcontextprotocol/conformance#430 · 1 commentaire · Ouverte le 31/7/2026
Spec gap: no defined success response for session-termination DELETE (only 405 is specified) Ouverte

Difficulté 5/5 Plus d'une semaine Accessibilité débutants 30/100

modelcontextprotocol/conformance#429 · Ouverte le 31/7/2026
tier-check: final 2026-07-28 is still treated as draft and legacy scenarios score by default Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 48/100

modelcontextprotocol/conformance#426 · 1 commentaire · Ouverte le 31/7/2026
Wire-schema validation does not see raw-HTTP / inline-mock scenario traffic Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 68/100

modelcontextprotocol/conformance#418 · 2 commentaires · Ouverte le 27/7/2026
Add conformance test (2025-06-18+): servers MUST reject JSON-RPC batch requests Ouverte

bug

Difficulté 3/5 1-2 jours Accessibilité débutants 68/100

modelcontextprotocol/conformance#378 · Ouverte le 1/7/2026
No client-suite scenarios for the tasks extension (io.modelcontextprotocol/tasks) Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 68/100

modelcontextprotocol/conformance#374 · 1 commentaire · Ouverte le 30/6/2026
Authorization Server Auth: DPoP Token Binding (SEP-1932) Ouverte

Difficulté 5/5 Plus d'une semaine Accessibilité débutants 45/100

modelcontextprotocol/conformance#370 · 3 commentaires · Ouverte le 25/6/2026
Server Auth: DPoP Proof Validation (SEP-1932) Ouverte

Difficulté 5/5 Plus d'une semaine Accessibilité débutants 45/100

modelcontextprotocol/conformance#369 · Ouverte le 25/6/2026
test: programmatic CLI harness for src/index.ts action handlers Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 67/100

modelcontextprotocol/conformance#363 · 1 commentaire · Ouverte le 24/6/2026
CI does not smoke-test client CLI path; everything-client drift on elicitation-sep1034-client-defaults and sse-retry Ouverte

bug

Difficulté 4/5 3-5 jours Accessibilité débutants 65/100

modelcontextprotocol/conformance#345 · 1 commentaire · Ouverte le 17/6/2026
SEP-2243: ServerRejectsMissingMethodHeader contradicts TypeScript SDK behavior Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 42/100

modelcontextprotocol/conformance#323 · 7 commentaires · Ouverte le 29/5/2026
caching scenario should use DRAFT-2026-v1 Ouverte

bug

Difficulté 2/5 1-3 heures Accessibilité débutants 72/100

modelcontextprotocol/conformance#315 · 1 commentaire · Ouverte le 24/5/2026
server-stateless doesn't set `mcp-method` etc. Ouverte

bug

Difficulté 2/5 1-3 heures Accessibilité débutants 68/100

modelcontextprotocol/conformance#312 · 1 commentaire · Ouverte le 23/5/2026
SEP-2575: remaining conformance tests Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 38/100

modelcontextprotocol/conformance#296 · 1 commentaire · Ouverte le 20/5/2026
Add SEP-2575 conformance tests Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 48/100

modelcontextprotocol/conformance#266 · 1 commentaire · Ouverte le 12/5/2026
Add support for a stdio testing Ouverte

enhancement

Difficulté 4/5 3-5 jours Accessibilité débutants 48/100

modelcontextprotocol/conformance#258 · 3 commentaires · 2 réactions · Ouverte le 29/4/2026
Run local conformance against any SDK at any ref (unblocks removing vendored examples) Ouverte

Difficulté 5/5 Plus d'une semaine Accessibilité débutants 45/100

modelcontextprotocol/conformance#250 · Ouverte le 24/4/2026
Standardize how scenarios report setup/execution failures Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 48/100

modelcontextprotocol/conformance#248 · Ouverte le 24/4/2026
Policy: do SHOULD-level (WARNING) checks count toward Tier-1 conformance? Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 48/100

modelcontextprotocol/conformance#245 · Ouverte le 24/4/2026
Proposal: Tasks conformance scenarios (spec 2025-11-25) Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 48/100

modelcontextprotocol/conformance#244 · 1 commentaire · 1 réaction · Ouverte le 23/4/2026
Add scenario option to authorization server conformance test Ouverte

enhancement

modelcontextprotocol/conformance#226 · 1 commentaire · 5 réactions · 1 personne assignée · Ouverte le 15/4/2026
Add JSON-based setup option to authorization server conformance test Ouverte

enhancement

Difficulté 3/5 1-2 jours Accessibilité débutants 64/100

modelcontextprotocol/conformance#225 · 4 réactions · Ouverte le 15/4/2026
Workload Identity Federation (SEP-1933) - Client Conformance Ouverte

Difficulté 5/5 Plus d'une semaine Accessibilité débutants 42/100

modelcontextprotocol/conformance#223 · Ouverte le 10/4/2026
tier-check reports 0/30 server conformance despite all tests passing Ouverte

Difficulté 3/5 1-2 jours Accessibilité débutants 48/100

modelcontextprotocol/conformance#182 · Ouverte le 5/3/2026
Spec tracking check should validate the submitted SDK release, not first-release-after-spec Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 52/100

modelcontextprotocol/conformance#167 · 3 commentaires · Ouverte le 24/2/2026
tier-check: support monorepos with multiple SDK packages Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 35/100

modelcontextprotocol/conformance#151 · Ouverte le 15/2/2026

modelcontextprotocol/conformance

Recevez les nouvelles issues par e-mail