How is it compared with the StarCoder
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 5/5
- Tiempo estimado
- Más de una semana
- Aptitud para principiantes
- 20/100
- Tipo de issue
- Nueva funcionalidad
- Claridad
- Necesita aclaración
- Estado de actividad
- Estancado
- Área
- machine-learning
Línea de trabajo
Start with the linked StarCoder blog and its HumanEval results, then identify the corresponding CodeGen2 evaluation results in this repository. Done would be a clear, reproducible comparison of the reported HumanEval performance, but the issue does not name files or an evaluation entry point.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
https://huggingface.co/blog/starcoder
They published some results on HumanEval. Not sure how they are compared
- Lenguaje dominante
- Python
- Estrellas
- 268
- Forks
- 11
- Métricas de merge de PR
- Sin PR fusionados en 30 d
Guía de contribución
No hay ninguna guía de contribución indexada para este repositorio
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de salesforce/CodeGen2
-
Dificultad 4/5 3-5 días Aptitud para principiantes 25/100
salesforce/CodeGen2#11 ·
-
Dificultad 3/5 1-2 días Aptitud para principiantes 30/100
salesforce/CodeGen2#10 ·
-
Dificultad 5/5 Más de una semana Aptitud para principiantes 15/100
salesforce/CodeGen2#9 ·
-
Dificultad 5/5 Más de una semana Aptitud para principiantes 15/100
salesforce/CodeGen2#7 ·
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 35/100
salesforce/CodeGen2#4 · 1 reacción ·
Todos los issues de salesforce/CodeGen2
Issues similares
-
bug
Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100
stephrobert/dsoxlab#238 ·
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100
sublimehq/package_control#1780 ·
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 65/100
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 70/100
nwg-piotr/nwg-displays#145 ·