Hacktoberfest 2026: những issue maintainer đã đánh dấu cho tháng Mười, đang mở và phù hợp người mới. Xem issue Hacktoberfest

Server scenarios fail servers for capabilities they never declared

Đang mở
#516 0 bình luận 0 reaction 0 người được giao Xem trên GitHub

Chưa có ai nhận issue này.

Đánh giá

Độ khó
4/5
Thời gian dự kiến
3-5 ngày
Mức phù hợp với người mới
40/100
Loại issue
Lỗi
Độ rõ ràng
Đặc tả rõ ràng
Mức độ hoạt động
Sôi nổi
Công nghệ
typescript
Lĩnh vực
testing-qa

Hướng nghiên cứu

Examine the conformance test suite structure, likely in a src/ or tests/ directory. Look for scenario definitions and how they are gated or filtered. The issue mentions specific scenario categories like prompts-* and resources-*. Find where server capabilities from the initialize method are read and used to determine test applicability. Understanding the test runner and reporting logic is key to implementing the suggested gating.

Do mô hình lập chỉ mục viết ra từ nội dung của issue.

Mô tả

The same minimal server as above declares only tools. Against it, server mode reports 6 passed, 24 failed. Nearly all of the 24 are not conformance failures:

Cause Scenarios
Capability not declared; -32601 Method not found is the correct answer prompts-* (5), resources-* (6), logging-set-level, tools-call-with-logging, completion-complete
Fixture tool not present (test_image_content, test_tool_with_progress, …) tools-call-image, -audio, -embedded-resource, -mixed-content, -with-progress, -sampling, -elicitation, elicitation-sep1034-defaults, elicitation-sep1330-enums
Genuine dns-rebinding-protection (served a foreign Host/Origin with 200)

For comparison, @modelcontextprotocol/server-everything 2026.8.31 scores 13 passed, 19 failed on 0.1.16.

This is expected for a suite built to test SDKs against the everything-server. The result is still that the suite cannot be pointed at a production server to answer "is this server conformant?", which is the question most operators and registries are asking. A correct server scores 6/30, and its only real defect is buried among 23 false ones.

Suggestions, cheapest first:

  1. Gate on declared capabilities. Read capabilities from initialize and report prompts, resources, logging and completions scenarios as not applicable when the capability is absent. Answering -32601 for an undeclared capability is what the spec says to do.
  2. Mark fixture-dependent scenarios (those that call test_* tools or test:// resources) as needing the fixture, and report them as not applicable when the tool is missing from tools/list, rather than failing them.
  3. A capability-agnostic suite (e.g. --suite production) holding only the scenarios that apply to any server: initialize, ping, tools/list shape, unknown-method and invalid-params handling, session handling, protocol-version header validation, and DNS-rebinding protection. That would let registries and operators cite the official suite for a real server.

Happy to contribute scenarios for (3) if that direction is welcome.

Ngôn ngữ chính
TypeScript
Star
127
Fork
101
Merge trung bình
4 ngày 7 giờ
Pull request đã merge (30 ngày)
6

Hướng dẫn đóng góp

Mở hướng dẫn đóng góp

Bắt đầu từ đâu

  1. Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
  2. Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
  3. Fork repository và làm thay đổi trên một nhánh.
  4. Mở pull request có tham chiếu số hiệu của issue.

Issue khác của modelcontextprotocol/conformance

Tất cả issue của modelcontextprotocol/conformance

Issue tương tự

Thêm issue về TypeScript

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.