EducationalTestingService/rsmtool

Voir sur GitHub

A Python package to facilitate research on building and evaluating automated scoring models.

Étoiles: 71
Forks: 21
Issues débutants ouvertes: 0
Issues indexées: 46

Langage dominant: Python
Licence: Apache-2.0
Dernier push GitHub: 27/12/2024
Dernière indexation: 15/9/2026
Guide de contribution: Aucun guide de contribution
Code de conduite: Aucun code de conduite
Labels débutants: help wanted good first issue
Métriques de merge des PR: Aucune PR mergée en 30 j

Accessible aux débutants Tout

Ouverte Toutes

Slim installation option or model inference export option Ouverte

Difficulté 5/5 Plus d'une semaine Accessibilité débutants 25/100

EducationalTestingService/rsmtool#689 · 5 commentaires · Ouverte le 11/11/2024
Log additional intermediate files to W&B Ouverte

enhancement

Difficulté 4/5 3-5 jours Accessibilité débutants 35/100

EducationalTestingService/rsmtool#630 · Ouverte le 31/7/2023
Add support for sections in rsmxval Ouverte

EducationalTestingService/rsmtool#557 · 1 personne assignée · Ouverte le 18/2/2022
New method for predicting from coefficients Ouverte

enhancement

Difficulté 5/5 Plus d'une semaine Accessibilité débutants 35/100

EducationalTestingService/rsmtool#545 · Ouverte le 9/8/2021
Streamline the code for flagging warnings in the reports Ouverte

good first issue help wanted

Difficulté 4/5 3-5 jours Accessibilité débutants 30/100

EducationalTestingService/rsmtool#539 · Ouverte le 19/7/2021
Simplify sign in subset_feature_selection Ouverte

enhancement

Difficulté 3/5 1-2 jours Accessibilité débutants 35/100

EducationalTestingService/rsmtool#529 · Ouverte le 9/6/2021
Use raw predictions in tutorial Ouverte

documentation good first issue

Difficulté 2/5 1-3 heures Accessibilité débutants 35/100

EducationalTestingService/rsmtool#524 · Ouverte le 1/6/2021
Add support for SKLL Voting Learners Ouverte

enhancement

Difficulté 3/5 1-2 jours Accessibilité débutants 35/100

EducationalTestingService/rsmtool#512 · Ouverte le 30/4/2021
Rewrite docstrings to match scikit-learn Style Ouverte

documentation enhancement help wanted

Difficulté 4/5 3-5 jours Accessibilité débutants 28/100

EducationalTestingService/rsmtool#491 · 1 commentaire · Ouverte le 25/11/2020
Deprecate _modify_eval_columns_to_ensure_version_compatibilty in RSMCompare Ouverte

Difficulté 2/5 1-3 heures Accessibilité débutants 35/100

EducationalTestingService/rsmtool#490 · 2 commentaires · Ouverte le 12/11/2020
Consider refactoring SMD code/changing documentation. Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 25/100

EducationalTestingService/rsmtool#489 · Ouverte le 12/11/2020
Rename argument name in `configuration_parser.check_flag_column()` Ouverte

enhancement

Difficulté 2/5 1-3 heures Accessibilité débutants 55/100

EducationalTestingService/rsmtool#485 · Ouverte le 3/11/2020
Run nbqa on our notebooks and integrate into workflow Ouverte

enhancement

Difficulté 3/5 1-2 jours Accessibilité débutants 35/100

EducationalTestingService/rsmtool#481 · Ouverte le 28/10/2020
Add option for NaNs to be converted to 0s Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 30/100

EducationalTestingService/rsmtool#480 · Ouverte le 27/10/2020
Tests for notebooks Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 25/100

EducationalTestingService/rsmtool#470 · 1 commentaire · Ouverte le 29/9/2020
QWK generates runtime warning Ouverte

EducationalTestingService/rsmtool#440 · 1 commentaire · 1 personne assignée · Ouverte le 18/5/2020
Add suppress_warnings argument to various metrics Ouverte

enhancement

Difficulté 4/5 3-5 jours Accessibilité débutants 35/100

EducationalTestingService/rsmtool#411 · 1 commentaire · Ouverte le 19/3/2020
Allow config dictionary to contain dataframe rather than path to a file Ouverte

Difficulté 4/5 3-5 jours Accessibilité débutants 35/100

EducationalTestingService/rsmtool#399 · Ouverte le 11/3/2020
Output file or directory in rsmpredict Ouverte

enhancement

Difficulté 4/5 3-5 jours Accessibilité débutants 35/100

EducationalTestingService/rsmtool#396 · 3 commentaires · Ouverte le 9/3/2020
Make sure that everything that accepts paths also accepts pathlib.Path Ouverte

enhancement

Difficulté 4/5 3-5 jours Accessibilité débutants 20/100

EducationalTestingService/rsmtool#385 · Ouverte le 26/2/2020
Investigate whether we can use any visualizers from Yellowbrick Ouverte

enhancement help wanted

Difficulté 5/5 Plus d'une semaine Accessibilité débutants 20/100

EducationalTestingService/rsmtool#383 · 1 commentaire · Ouverte le 25/2/2020
Exclude unnecessary packages from conda-recipe Ouverte

enhancement

EducationalTestingService/rsmtool#374 · 1 personne assignée · Ouverte le 20/2/2020
Replace all path operations and functions with `pathlib` Ouverte

good first issue help wanted

Difficulté 4/5 3-5 jours Accessibilité débutants 25/100

EducationalTestingService/rsmtool#370 · 1 commentaire · Ouverte le 14/2/2020
Consistent approach to warnings Ouverte

enhancement help wanted

Difficulté 5/5 Plus d'une semaine Accessibilité débutants 25/100

EducationalTestingService/rsmtool#367 · 5 commentaires · Ouverte le 14/2/2020
Capture incorrect input to correlations Ouverte

enhancement

Difficulté 2/5 1-3 heures Accessibilité débutants 50/100

EducationalTestingService/rsmtool#365 · Ouverte le 13/2/2020
Modify tests to fix warnings based on SKLL hyperparameters Ouverte

enhancement help wanted

Difficulté 4/5 3-5 jours Accessibilité débutants 25/100

EducationalTestingService/rsmtool#360 · Ouverte le 11/2/2020
Try solution for kernel RuntimeErrors Ouverte

enhancement

EducationalTestingService/rsmtool#350 · 2 commentaires · 1 personne assignée · Ouverte le 30/1/2020
Resource warning when running tests Ouverte

enhancement

EducationalTestingService/rsmtool#346 · 8 commentaires · 1 personne assignée · Ouverte le 28/1/2020
Kappa computation when predicted scores are on a different scale Ouverte

bug

Difficulté 4/5 3-5 jours Accessibilité débutants 25/100

EducationalTestingService/rsmtool#342 · 10 commentaires · Ouverte le 22/1/2020
Generate predictions for responses with non-numeric human scores Ouverte

enhancement

Difficulté 4/5 3-5 jours Accessibilité débutants 35/100

EducationalTestingService/rsmtool#341 · Ouverte le 17/1/2020
Add consistency to RSMSummarize output Ouverte

enhancement good first issue

Difficulté 5/5 Plus d'une semaine Accessibilité débutants 15/100

EducationalTestingService/rsmtool#340 · Ouverte le 17/1/2020
Compute metrics for all data once Ouverte

enhancement

Difficulté 3/5 1-2 jours Accessibilité débutants 48/100

EducationalTestingService/rsmtool#338 · Ouverte le 7/1/2020
Consistently show in the report if the features were standardized Ouverte

Difficulté 3/5 1-2 jours Accessibilité débutants 35/100

EducationalTestingService/rsmtool#337 · Ouverte le 7/1/2020
Provide descriptives for all features, not just those in the final model Ouverte

enhancement

Difficulté 4/5 3-5 jours Accessibilité débutants 42/100

EducationalTestingService/rsmtool#336 · Ouverte le 7/1/2020
More flexible treatment of continuous co-variates Ouverte

enhancement

Difficulté 4/5 3-5 jours Accessibilité débutants 35/100

EducationalTestingService/rsmtool#335 · Ouverte le 7/1/2020
Look into parallelization Ouverte

Difficulté 5/5 Plus d'une semaine Accessibilité débutants 20/100

EducationalTestingService/rsmtool#334 · 1 commentaire · Ouverte le 7/1/2020
Improve RSMSummarize and RSMCompare tutorials Ouverte

documentation

Difficulté 3/5 1-2 jours Accessibilité débutants 35/100

EducationalTestingService/rsmtool#333 · Ouverte le 7/1/2020
Highlight non-zero differences in RSMCompare Ouverte

enhancement help wanted

Difficulté 3/5 1-2 jours Accessibilité débutants 35/100

EducationalTestingService/rsmtool#332 · Ouverte le 7/1/2020
Match the terminology between RSMTool and RSMCompare Ouverte

Difficulté 5/5 Plus d'une semaine Accessibilité débutants 25/100

EducationalTestingService/rsmtool#330 · Ouverte le 7/1/2020
The name of human score column in RSMPredict Ouverte

Difficulté 3/5 1-2 jours Accessibilité débutants 45/100

EducationalTestingService/rsmtool#329 · Ouverte le 7/1/2020
Capture warning message from notebook Ouverte

enhancement

EducationalTestingService/rsmtool#320 · 1 personne assignée · Ouverte le 22/11/2019
Allow `features` to take a list of dictionaries Ouverte

enhancement

Difficulté 3/5 1-2 jours Accessibilité débutants 35/100

EducationalTestingService/rsmtool#298 · Ouverte le 24/9/2019
Add more analyses to RSMCompare/RSMSummarize Ouverte

enhancement help wanted

Difficulté 4/5 3-5 jours Accessibilité débutants 35/100

EducationalTestingService/rsmtool#260 · Ouverte le 12/6/2019
More prominent warning for classifiers that do not support expected probabilities Ouverte

enhancement help wanted

Difficulté 4/5 3-5 jours Accessibilité débutants 25/100

EducationalTestingService/rsmtool#196 · Ouverte le 13/3/2018
Improve confusion matrix and score distributions Ouverte

enhancement

Difficulté 3/5 1-2 jours Accessibilité débutants 35/100

EducationalTestingService/rsmtool#151 · Ouverte le 7/2/2018
Save RSMCompare outputs Ouverte

enhancement help wanted

Difficulté 5/5 Plus d'une semaine Accessibilité débutants 20/100

EducationalTestingService/rsmtool#125 · Ouverte le 19/1/2018

EducationalTestingService/rsmtool

Recevez les nouvelles issues par e-mail