Contribution workflow for adding benchmarks / tasks
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 5/5
- Tiempo estimado
- Más de una semana
- Aptitud para principiantes
- 25/100
- Tipo de issue
- Nueva funcionalidad
- Claridad
- Necesita aclaración
- Estado de actividad
- Tranquilo
Línea de trabajo
No se nombra ningún archivo de implementación, prueba ni punto de entrada. Revisa el proceso existente de GitHub issue y PR, los formularios, los archivos estructurados y los envíos directos desde el sitio web; después determina qué workflow debería admitir tareas, benchmarks, papers, resultados, correcciones y review; se considera terminado cuando el proyecto tenga una ruta de contribución acordada y documentada.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
How can the community contribute new tasks, benchmarks, and SOTA results?
Hi! Thanks for bringing the project back — really happy to see it alive again.
My HF profile: https://huggingface.co/DenisKochetov
I wanted to open a broader issue about contributions, not only for myself but for the whole research / open-source community.
The original Papers with Code was extremely useful because it covered many tasks, benchmarks, papers, and SOTA tables. It was also very convenient that many arXiv papers had direct Papers with Code links.
Maintaining benchmark coverage across many areas is a huge amount of work, so this feels like a perfect case for community contributions. Researchers are naturally motivated to add their own papers and SOTA results, especially when they want their work to be visible and properly listed.
So my main question is:
What is the best way for users / researchers to contribute new tasks, benchmarks, datasets, papers, and results to the site?
For example:
- adding a new task
- adding or editing benchmark datasets
- submitting a paper/result to a leaderboard
- adding a new leaderboard for an existing task
- fixing metrics, links, or reported numbers
- helping review community submissions
I’m personally interested in helping with 3D generation, image-to-3D, text-to-3D, 3D reconstruction, and animal pose estimation.
Would love to understand what contribution workflow you prefer: GitHub issues, PRs, forms, structured files, direct website submissions, or something else.
Happy to help.
- Lenguaje dominante
- Sin datos de lenguaje
- Estrellas
- 11
- Forks
- 1
- Métricas de merge de PR
- Sin PR fusionados en 30 d
Preparar el entorno
Este proyecto no incluye contenedor de desarrollo, Dockerfile ni guía de contribución, así que la configuración corre por tu cuenta: empieza por su README y consulta nuestra guía para la primera contribución para los pasos generales.
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de huggingface/paperswithcode-feedback
-
Data LicenseAbierto
Dificultad 1/5 Menos de una hora Aptitud para principiantes 85/100
huggingface/paperswithcode-feedback#49 · 1 comentario ·
-
Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100
-
Dificultad 5/5 Más de una semana Aptitud para principiantes 30/100
-
Dificultad 5/5 Más de una semana Aptitud para principiantes 28/100
huggingface/paperswithcode-feedback#41 · 1 comentario · 1 reacción ·
-
SuggestionsAbierto
Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100
Todos los issues de huggingface/paperswithcode-feedback
Issues similares
-
Dificultad 1/5 Menos de una hora Aptitud para principiantes 82/100
btclib-org/btclib-node#2083 ·
Los mantenedores suelen responder en 1 día
-
dx editor
Dificultad 2/5 1-3 horas Aptitud para principiantes 69/100
NekomyaDev/nudge#269 ·
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 73/100
haowjy/mars-agents#228 ·
Los mantenedores suelen responder en 1 día
-
Dificultad 1/5 Menos de una hora Aptitud para principiantes 78/100
cline/mcp-marketplace#3301 ·
-
bug
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
Hamplard-Hub/Hamplard--contracts#720 · 1 comentario ·
Los mantenedores suelen responder en 2 días