bytedance/UI-TARS-desktop

Benchmark Evaluation Script

Open

#176 aperta il 10 mar 2025

Vedi su GitHub
 (0 commenti) (0 reazioni) (0 assegnatari)TypeScript (3644 fork)github user discovery
FeatureGood first issue

Metriche repository

Star
 (36.199 star)
Metriche merge PR
 (Metriche PR in attesa)

Descrizione

I wonder if benchmark script can be provided to help reproduce the evaluation performance like android control and so on.

Guida contributor

Direzione di ricerca
Rivedi gli approcci di test e valutazione esistenti del repository, studia l'API e i file di configurazione dell'agente e progetta uno script che misuri metriche di performance come il tempo di completamento delle attività e l'accuratezza.
Tech stack
typescript
Dominio
testingdeveloper experience
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
2
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
1-3 ore
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Nuova
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
GitNode.js
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
75