Verify evals on Papers with Code
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 2/5
- Tiempo estimado
- 1-3 horas
- Aptitud para principiantes
- 55/100
- Tipo de issue
- Documentación
- Claridad
- Bastante claro
- Estado de actividad
- Tranquilo
- Stack tecnológico
- huggingface
Línea de trabajo
Start with the linked Papers with Code paper page, its 13 verified paper-native evaluation rows, and the SciCode benchmark page. Check each score, model name, benchmark protocol, and openness metadata against the paper or official release artifacts; done means reporting any corrections or confirming that the imported results are accurate.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
Hi,
Niels here from the open-source team at Hugging Face. Congratulations on your work!
I've made the paper and 13 verified paper-native evaluations available on Papers with Code.
The paper has results on Agents, Coding Agents, World Knowledge, and 2 additional task pages.
The MiniMax-M2.7 result currently ranks fourth on SciCode.
Would it be possible to verify these results and let me know if any score, model name, benchmark protocol, or openness metadata should be corrected? The imported rows are tied to the paper or its official release artifacts; comparison-table baselines were not added.
You can also edit the task, methods, project page, and GitHub URL directly from the paper page using your Hugging Face account.
Kind regards,
Niels
- Lenguaje dominante
- Sin datos de lenguaje
- Estrellas
- 366
- Forks
- 63
- Métricas de merge de PR
- Sin PR fusionados en 30 d
Preparar el entorno
Este proyecto no incluye contenedor de desarrollo, Dockerfile ni guía de contribución, así que la configuración corre por tu cuenta: empieza por su README y consulta nuestra guía para la primera contribución para los pasos generales.
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de MiniMax-AI/MiniMax-M2.7
-
MiniMax-M3: /anthropic endpoint reports 200K context instead of 1M — Claude Code compacts earlyAbierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 68/100
MiniMax-AI/MiniMax-M2.7#46 · 5 comentarios · 1 reacción ·
-
ไหมAbierto
Dificultad 5/5 Más de una semana Aptitud para principiantes 1/100
MiniMax-AI/MiniMax-M2.7#59 ·
-
YOU ARE STEALING ME MONEYAbierto
Dificultad 4/5 3-5 días Aptitud para principiantes 15/100
MiniMax-AI/MiniMax-M2.7#57 ·
-
YOU ARE STEALING ME MONEYAbierto
Dificultad 4/5 3-5 días Aptitud para principiantes 15/100
MiniMax-AI/MiniMax-M2.7#56 ·
-
Dificultad 5/5 Más de una semana Aptitud para principiantes 15/100
MiniMax-AI/MiniMax-M2.7#55 ·
Todos los issues de MiniMax-AI/MiniMax-M2.7
Issues similares
-
Dificultad 1/5 1-3 horas Aptitud para principiantes 78/100
btclib-org/portanode#699 ·
Los mantenedores suelen responder en 1 día
-
ObjectMapper
Dificultad 2/5 1-3 horas Aptitud para principiantes 68/100
symfony/symfony-docs#23390 ·
Los mantenedores suelen responder en 2 días
-
Guidelines: redundant use cases, stale dev bundle after snapshot bumps, looking up snapshot APIPosiblemente ocupada @totally-not-ai la tomó hoy. Abierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 76/100
vaadin/use-cases#441 · 1 comentario ·
Los mantenedores suelen responder en 1 día
-
sync-en
Dificultad 1/5 1-3 horas Aptitud para principiantes 84/100
Los mantenedores suelen responder en 1 día
-
sync-en
Dificultad 1/5 Menos de una hora Aptitud para principiantes 83/100
Los mantenedores suelen responder en 3 días