Calibration/Refinement Decomposition of LOO Scores

Abierto

#179 abierto el 12/6/2021 2 comentarios 0 reacciones 0 asignados Ver en GitHub

Nadie ha tomado este issue todavía.

Evaluación

Dificultad: 5/5
Tiempo estimado: Más de una semana
Aptitud para principiantes: 25/100

Tipo de issue: Nueva funcionalidad
Claridad: Necesita aclaración
Estado de actividad: Estancado
Stack tecnológico: r
Área: data

Línea de trabajo

El issue propone descomponer las puntuaciones LOO en calibración y refinamiento, pero no menciona archivos, tests ni puntos de entrada de la implementación. Comienza revisando los cálculos existentes de las puntuaciones LOO y el trabajo relacionado mencionado por Jonah y @avehtari. Antes de programar, aclara la descomposición y define el resultado esperado para el usuario y los tests.

Escrito por el modelo de indexación a partir del texto del issue.

Descripción

I think a breakdown of LOO scores into calibration/refinement would be interesting and useful to users. Mentioning @avehtari because Jonah mentioned you'd proposed adding this decomposition and said you might have some related work.

Lenguaje dominante: R
Estrellas: 157
Forks: 38
Merge medio: 4 d 16 h
PR fusionados (30 d): 2

Guía de contribución

Abrir la guía de contribución

Primeros pasos

Lee el issue completo y luego la guía de contribución del proyecto.
Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
Haz un fork del repositorio y trabaja en una rama.
Abre un pull request que haga referencia al número del issue.

Más de stan-dev/loo

`crps.numeric` does not pass `permutations` correctly to `crps.matrix` Abierto

Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100

stan-dev/loo#397 · 1 reacción · Abierto el 23/9/2026
Extend loo_plot_difference Abierto

Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

stan-dev/loo#394 · 1 comentario · Abierto el 9/9/2026
Update output structure of `loo_compare` for subsampling case Abierto

Dificultad 3/5 1-2 días Aptitud para principiantes 45/100

stan-dev/loo#392 · Abierto el 2/9/2026
loo_model_weights() rejects PSIS-LOO objects with equal observations but different posterior sample sizes Abierto

Dificultad 3/5 1-2 días Aptitud para principiantes 68/100

stan-dev/loo#389 · Abierto el 11/8/2026
Clean up issues Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 25/100

stan-dev/loo#388 · 1 reacción · Abierto el 24/7/2026

Todos los issues de stan-dev/loo

Issues similares

Unable to use 'start_time' 'end_time' params for get_airnow_monitors() Abierto

Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100

briandconnelly/airnow#9 · Abierto el 23/9/2026
Copy cohorts to keep old cohorts Abierto

Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100

OHDSI/CohortConstructor#774 · Abierto el 23/9/2026
[PRE REVIEW]: fastml: An R package for leakage-aware machine learning workflows with fold-local preprocessing Abierto

pre-review R TeX Track: 5 (DSAIS)

Dificultad 1/5 Menos de una hora Aptitud para principiantes 60/100

openjournals/joss-reviews#11330 · 7 comentarios · Abierto el 23/9/2026
Release autosync 0.1.1 Abierto

Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100

posit-dev/autosync#26 · Abierto el 23/9/2026
bug: when organisation.yml has no git key, check_lintr() errors Abierto

Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100

inbo/checklist#212 · Abierto el 23/9/2026

Más issues de R