The name of human score column in RSMPredict
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 3/5
- Tiempo estimado
- 1-2 días
- Aptitud para principiantes
- 45/100
- Tipo de issue
- Error
- Claridad
- Bastante claro
- Estado de actividad
- Estancado
- Stack tecnológico
- python
- Área
- machine-learning
Línea de trabajo
Localiza el código de RSMPredict que lee el archivo .json y comprueba si human_score_column está presente en los datos. Traza cómo se almacena el valor predeterminado 'sc1' y cómo se copian las puntuaciones humanas. Se considera terminado cuando el código puede distinguir una columna configurada explícitamente del valor predeterminado e informa del caso de una columna ausente en lugar de continuar silenciosamente.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
[from JIRA] The human_score_column in RSMPredict is by default set to 'sc1' when processing the .json file and there is no way to distinguish later in the code whether the user explicitly specified that sc1 contains human scores.
When we check whether we need to copy over human scores, we simply check whether the human_score_column is present in the data. If a user set human_score_column to 'sc1' but forgot to include it, the tool will not raise an error and will proceed as if no human_score_column was specified.
This does not affect any of the predictions (we only use that field to copy over other values) but should be fixed at some point in the future.
- Lenguaje dominante
- Python
- Estrellas
- 71
- Forks
- 21
- Métricas de merge de PR
- Sin PR fusionados en 30 d
Guía de contribución
No hay ninguna guía de contribución indexada para este repositorio
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de EducationalTestingService/rsmtool
-
Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100
EducationalTestingService/rsmtool#689 · 5 comentarios ·
-
enhancement
Dificultad 4/5 3-5 días Aptitud para principiantes 35/100
-
EducationalTestingService/rsmtool#557 · 1 asignado ·
-
enhancement
Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100
-
good first issue help wanted
Dificultad 4/5 3-5 días Aptitud para principiantes 30/100
Todos los issues de EducationalTestingService/rsmtool
Issues similares
-
bug
Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100
xinnan-tech/xiaozhi-fde-talk#263 ·
-
rules
Dificultad 1/5 Menos de una hora Aptitud para principiantes 90/100
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 70/100
huggingface/Repo2RLEnv#163 · 1 comentario ·
-
Dificultad 1/5 Menos de una hora Aptitud para principiantes 95/100
huggingface/sentence-transformers#4074 ·
-
comp/dashboard invalid P3
Dificultad 2/5 1-3 horas Aptitud para principiantes 70/100
NousResearch/hermes-agent#121143 ·