GoogleCloudPlatform/kubectl-ai

Add github action to run lightweight evals as presubmit job

Aperta

#119 aperta il 28 apr 2025

Vedi su GitHubGuida contributor
 (5 commenti) (0 reazioni) (1 assegnatario)Go (708 fork)auto 404
good first issue

Metriche repository

Star
 (7532 stelle)
Metriche merge PR
 (Metriche PR in attesa)

Descrizione

We want to run a few eval tasks (may be difficulty level easy) as pre-submit tasks to ensure that new PRs are getting some basic e2e tests.

Details:

  • The pre-submit job should bring up a kind cluster
  • The pre-submit job should also bring up ollama or llamacpp server
  • Run evals with the difficulty level easy or to begin with --task-pattern=scale
  • Add contributing section in the README.md to use this job as e2e test

Guida contributor

Direzione di ricerca
Configura un workflow GitHub Actions che crea un cluster kind, installa il server Ollama ed esegue attività di valutazione con livello di difficoltà 'easy' o pattern 'scale'. Documenta in README.
Tech stack
godockerkubernetesgithub actions
Dominio
devopsbackendtesting
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
3
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
1-2 giorni
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
GitDockerKubernetes basicsGitHub Actions
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
40