Deprecate _modify_eval_columns_to_ensure_version_compatibilty in RSMCompare

Abierto

#490 abierto el 12/11/2020 2 comentarios 0 reacciones 0 asignados Ver en GitHub

Nadie ha tomado este issue todavía.

Evaluación

Dificultad: 2/5
Tiempo estimado: 1-3 horas
Aptitud para principiantes: 35/100

Tipo de issue: Refactorización
Claridad: Bastante claro
Estado de actividad: Estancado
Stack tecnológico: python
Área: backend

Línea de trabajo

Comienza en comparer.py con la clase Comparer y _modify_eval_columns_to_ensure_version_compatibilty. Rastrea dónde se usa este helper de compatibilidad y revisa las pruebas existentes o las convenciones de deprecation del proyecto; se considera terminado cuando la deprecation prevista está documentada y verificada sin romper el comportamiento compatible de RSMCompare.

Escrito por el modelo de indexación a partir del texto del issue.

Descripción

The Comparer class in comparer.py currently contains a class _modify_eval_columns_to_ensure_version_compatibilty to allow running RSMCompare on outputs from RSMTool < 7.0. I think it's time to deprecate this.

Lenguaje dominante: Python
Estrellas: 71
Forks: 21
Métricas de merge de PR: Sin PR fusionados en 30 d

Guía de contribución

No hay ninguna guía de contribución indexada para este repositorio

Primeros pasos

Lee el issue completo y luego la guía de contribución del proyecto.
Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
Haz un fork del repositorio y trabaja en una rama.
Abre un pull request que haga referencia al número del issue.

Más de EducationalTestingService/rsmtool

Slim installation option or model inference export option Abierto

Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

EducationalTestingService/rsmtool#689 · 5 comentarios · Abierto el 11/11/2024
Log additional intermediate files to W&B Abierto

enhancement

Dificultad 4/5 3-5 días Aptitud para principiantes 35/100

EducationalTestingService/rsmtool#630 · Abierto el 31/7/2023
Add support for sections in rsmxval Abierto

EducationalTestingService/rsmtool#557 · 1 asignado · Abierto el 18/2/2022
New method for predicting from coefficients Abierto

enhancement

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

EducationalTestingService/rsmtool#545 · Abierto el 9/8/2021
Streamline the code for flagging warnings in the reports Abierto

good first issue help wanted

Dificultad 4/5 3-5 días Aptitud para principiantes 30/100

EducationalTestingService/rsmtool#539 · Abierto el 19/7/2021

Todos los issues de EducationalTestingService/rsmtool

Issues similares

slack-gif-creator: validate_gif() multiplies the last frame's duration by the frame count, so reported duration/fps are wrong (1.0s GIF reported as 1.8s) Abierto

Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100

anthropics/skills#1811 · 1 comentario · Abierto el 23/9/2026
App fails to start with gradio 6 (allowed by `gradio>=5.49.1`) Abierto

Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100

speaches-ai/speaches#678 · Abierto el 23/9/2026
ModuleNotFoundError: No module named 'mcp.server.fastmcp'. Abierto

bug

Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100

datalayer/mcp-compose#42 · Abierto el 23/9/2026
import spacy fails with ModuleNotFoundError: No module named 'click' Abierto

Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100

conda-forge/spacy-feedstock#177 · Abierto el 23/9/2026
humaneval: extract_function_body corrupts a fenced body-only reply, so the same correct code scores INCORRECT fenced and CORRECT unfenced Abierto

Dificultad 2/5 1-3 horas Aptitud para principiantes 70/100

UKGovernmentBEIS/inspect_evals#2523 · Abierto el 23/9/2026

Más issues de Python