Hacktoberfest 2026: những issue maintainer đã đánh dấu cho tháng Mười, đang mở và phù hợp người mới. Xem issue Hacktoberfest

mcp-tools audit: add an eval case for C4 description length

Đã đóng Phù hợp với người mới
#6,897 1 bình luận 0 reaction 0 người được giao Xem trên GitHub

Maintainer thường phản hồi trong vòng 1 ngày

@melodic-automation-lanes đang làm issue này rồi.

Từ ngày 18/10/2026.

  • #8061 của @melodic-automation-lanes — đang mở

Đánh giá

Độ khó
2/5
Thời gian dự kiến
1-3 giờ
Mức phù hợp với người mới
75/100
Loại issue
Tính năng
Độ rõ ràng
Đặc tả rõ ràng
Mức độ hoạt động
Sôi nổi
Công nghệ
json
Lĩnh vực
testing

Hướng nghiên cứu

Bắt đầu từ plugins/mcp-tools/skills/audit/evals/evals.json và sao chép cấu trúc của một trường hợp hiện có. Thêm một fixture gồm một mô tả công cụ và một trường instructions của máy chủ, mỗi trường dài hơn 2.048 ký tự, sau đó thêm một trường hợp kỳ vọng C4 WARN cho từng trường, kiểm tra hướng dẫn rằng các chi tiết quan trọng nằm gần đầu. Hoàn thành khi trường hợp mới có trong evals.json và lần chạy eval kiểm tra báo C4 WARN cho cả hai trường.

Do mô hình lập chỉ mục viết ra từ nội dung của issue.

Mô tả

needs-human needs-triage

The /mcp-tools:audit evals (plugins/mcp-tools/skills/audit/evals/evals.json) have no case exercising C4, the tool description and server instructions length criterion. #6779 re-grades an over-2,048-character description from FAIL to WARN after a source conflict between the mcp page, env-vars page and changelog 2.1.295/2.1.296; nothing checks that the audit applies the new grade.

Add a fixture with one tool description and one server instructions field over 2,048 characters, and an eval case expecting C4 WARN for each, with the critical-details-near-the-start guidance.

Found during the Claude Code v2.1.265..v2.1.296 changelog apply.

Ngôn ngữ chính
Shell
Star
22
Fork
2
Merge trung bình
7 giờ 57 phút
Pull request đã merge (30 ngày)
938

Chuẩn bị môi trường

Bắt đầu từ đâu

  1. Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
  2. Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
  3. Fork repository và làm thay đổi trên một nhánh.
  4. Mở pull request có tham chiếu số hiệu của issue.

Issue khác của melodic-software/claude-code-plugins

Tất cả issue của melodic-software/claude-code-plugins

Issue tương tự

Thêm issue về Shell/Bash

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.