Start overleaf for benchmark tech report

Aperta

#54 aperta il 16/8/2021 1 commento 3 reazioni 2 assegnatari Vedi su GitHub

@arunraja-hub ci sta già lavorando.

Dal 23/8/2021.

Valutazione

Questa issue non è ancora stata valutata.

documentation

Questa issue non ha una descrizione.

Leggi tutta la issue e poi la guida ai contributi del progetto.
Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
Fai un fork del repository e lavora su un branch.
Apri una pull request che faccia riferimento al numero della issue.

Add MKQA to Full Benchmark
Aperta
- Qualcosa non va?
Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100

bigscience-workshop/evaluation#73 · Aperta il 7/2/2022
Refactor task template to merge multilingual.json and english.json
Forse di nuovo libera @wilsonyhlee l’ha presa 1863 giorni fa e non c’è nessuna pull request aperta. Aperta
- Qualcosa non va?
bigscience-workshop/evaluation#64 · 1 assegnatario · Aperta il 2/9/2021
Wrap evaluation benchmark using HF-trainer
Aperta
- Qualcosa non va?
Difficoltà 5/5 Più di una settimana Idoneità per principianti 20/100

bigscience-workshop/evaluation#61 · 2 commenti · 3 reazioni · Aperta il 25/8/2021
Setup testing
Forse di nuovo libera @tttyuntian l’ha presa 1878 giorni fa e non c’è nessuna pull request aperta. Aperta
- Qualcosa non va?
engineering

bigscience-workshop/evaluation#57 · 2 commenti · 3 assegnatari · Aperta il 19/8/2021
translate validation prompts into all training languages
Forse di nuovo libera @epavlick l’ha presa 1885 giorni fa e non c’è nessuna pull request aperta. Aperta
- Qualcosa non va?
multilingual simple_benchmark

bigscience-workshop/evaluation#50 · 9 commenti · 2 assegnatari · Aperta il 12/8/2021