Evaluation UI: Model Config
Maintainer thường phản hồi trong vòng 1 ngày
Chưa có ai nhận issue này.
Đánh giá
- Độ khó
- 4/5
- Thời gian dự kiến
- 3-5 ngày
- Mức phù hợp với người mới
- 45/100
- Loại issue
- Tính năng
- Độ rõ ràng
- Khá rõ ràng
- Mức độ hoạt động
- Đình trệ
- Công nghệ
- typescript
- Lĩnh vực
- frontend
Hướng nghiên cứu
Không có tệp hoặc bài kiểm thử nào được nêu tên. Hãy bắt đầu bằng cách xác định UI cấu hình đánh giá và mã xây dựng cấu hình model, sau đó lần theo cách tên model hiện tại, ID vector store và system prompt đang được xử lý. Công việc được hoàn thành khi có thể cấu hình các tùy chọn reasoning, verbosity, temperature, top_p và max_tokens dành riêng cho từng model trong các bài đánh giá, bao gồm cả những tổ hợp khác nhau.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Mô tả
Is your feature request related to a problem?
The current evaluation config only supports basic options: model name, vector store ID, and system prompt. However, different models have different configuration parameters—newer models support reasoning and verbosity, while older models use temperature and top_p.
This limits our ability to properly evaluate models with their optimal settings.
Describe the solution you'd like
Add support for model-specific configuration options in the evaluation config:
- Newer models: reasoning, verbosity
- Older models: temperature, top_p, max_tokens
This would:
- Allow evaluations with model-appropriate parameters
- Enable testing different config combinations (e.g., high vs low temperature)
- Ngôn ngữ chính
- TypeScript
- Star
- 1
- Fork
- 0
- Merge trung bình
- 19 giờ 4 phút
- Pull request đã merge (30 ngày)
- 6
Chuẩn bị môi trường
- Không có Dockerfile hay tệp Docker Compose
- Có mẫu pull request
- Không có hướng dẫn đóng góp
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của ProjectTech4DevAI/kaapi-frontend
-
enhancement
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 72/100
ProjectTech4DevAI/kaapi-frontend#267 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
enhancement
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 82/100
ProjectTech4DevAI/kaapi-frontend#266 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 1/5 Dưới một giờ Mức phù hợp với người mới 90/100
ProjectTech4DevAI/kaapi-frontend#261 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
ProjectTech4DevAI/kaapi-frontend#258 · 3 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Assessment: Include input columns in resultsCó thể đã có người làm @vprashrex đã nhận 12 ngày trước. Đang mởbug enhancement
ProjectTech4DevAI/kaapi-frontend#286 · 1 người được giao ·
Maintainer thường phản hồi trong vòng 1 ngày
Tất cả issue của ProjectTech4DevAI/kaapi-frontend
Issue tương tự
-
bug
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 88/100
MystenLabs/MemWal#1085 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 84/100
Maintainer thường phản hồi trong vòng 1 ngày
-
📕documentation
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 72/100
db-ux-design-system/core-web#8343 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
enhancement triage/needs-triage
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 88/100
heygen-com/hyperframes#4944 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Pressing Escape to close the time dropdown in the event form asks to discard the whole eventĐang mởai-driven-qa bug claude
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 82/100
linagora/twake-calendar-frontend#1493 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày