GoogleCloudPlatform/kubectl-ai

Help needed: We need more evals

Ouverte

#145 ouverte le 6 mai 2025

Voir sur GitHubGuide contributeur
 (5 commentaires) (4 réactions) (0 personne assignée)Go (708 forks)auto 404
good first issuehelp wanted

Métriques du dépôt

Stars
 (7 532 étoiles)
Métriques de merge PR
 (Métriques PR en attente)

Description

kubectl-ai has 10 eval tasks today covering different areas. We want to improve the evals coverage. The goal is to get the eval coverage closer to realistic scenario that users run into.

This is an area where we need input from the community. Share the scenarios that you or your team run into very regularly.

Adding an eval task to k8s-bench is very simple, you can see existing tasks.

Ask:

  • Share a scenario that we can add eval for
  • Better, send a PR with the eval task following an example under k8s-bench directory.

/cc @selimacerbas @rxinui @cwrau @hakman @mattn @DoctorLai @mschneider82 @tuannvm

Guide contributeur

Direction de recherche
Passez en revue les tâches d'évaluation existantes dans k8s bench et proposez des scénarios utilisateur réalistes.
Stack technique
go
Domaine
devopstesting
Type d'issue
Recherche
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
1
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
Moins d'une heure
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Active
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
Kuberneteskubectl ai
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
70