GoogleCloudPlatform/kubectl-ai

Help needed: We need more evals

Offen

#145 geöffnet am 06.05.2025

Auf GitHub ansehenContributor Guide
 (5 Kommentare) (4 Reaktionen) (0 zugewiesene Personen)Go (708 Forks)auto 404
good first issuehelp wanted

Repository-Metriken

Stars
 (7.532 Sterne)
PR-Merge-Metriken
 (PR-Metriken ausstehend)

Beschreibung

kubectl-ai has 10 eval tasks today covering different areas. We want to improve the evals coverage. The goal is to get the eval coverage closer to realistic scenario that users run into.

This is an area where we need input from the community. Share the scenarios that you or your team run into very regularly.

Adding an eval task to k8s-bench is very simple, you can see existing tasks.

Ask:

  • Share a scenario that we can add eval for
  • Better, send a PR with the eval task following an example under k8s-bench directory.

/cc @selimacerbas @rxinui @cwrau @hakman @mattn @DoctorLai @mschneider82 @tuannvm

Contributor Guide

Research-Richtung
Überprüfen Sie die vorhandenen Evaluierungsaufgaben in k8s bench und schlagen Sie realistische Benutzerszenarien vor.
Tech Stack
go
Domain
devopstesting
Issue Type
Recherche
SchwierigkeitGeschätzte Implementierungsschwierigkeit für neue Contributors, von 1 für sehr kleine Änderungen bis 5 für Expertenarbeit.
1
Geschätzte ZeitEin grober Zeitrahmen, um zu recherchieren, zu implementieren, zu testen und einen Pull Request vorzubereiten.
Unter 1 Stunde
AktivitätsstatusWie verfügbar das Issue gerade wirkt: frisch, aktiv, stale, blockiert oder wartet auf Maintainer-Input.
Aktiv
KlarheitWie klar das Issue die erwartete Änderung, Akzeptanzkriterien und den nächsten Schritt erklärt.
Klar
Voraussetzungen
Kuberneteskubectl ai
EinsteigerfreundlichkeitEin Score von 1 bis 100, der schätzt, wie zugänglich dieses Issue für First-Time Contributors ist.
70