Add CI calculation over posterior samples for a percentage correct other than default
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Idoneità per principianti
- 35/100
Direzione di ricerca
Start in the results object's threshold() method, where the percentage-correct value is handled. Trace how posterior samples are generated and how existing threshold intervals are calculated, then update the documentation page mentioned in the issue. Done means percentile confidence intervals can be computed for a requested percentage correct other than the default.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
@guillermoaguilar thanks for the careful explanation, I understand the argument now. We are not computing a real CI over the threshold, but this is what the warning is about.
The alternative way to compute the CI using the samples would marginalize over all the other parameters and indeed it could give an accurate (if non-deterministic) estimate of the CI over the threshold.
I don't have objections with going forward with the implementation in #241. Should we complete that PR and then discuss how to implement a sampling-based CI?
Originally posted by @pberkes in #191
We do this inside method threshold( ) in the results object. We need to run enough posterior samples and from them get percentile CIs for the percentage correct asked.
Also need to update the documentation page.
- Lingua principale
- Python
- Stelle
- 65
- Fork
- 26
- Merge medio
- 9m
- PR unite (30g)
- 1
Preparare l'ambiente
Questo progetto non fornisce container di sviluppo, Dockerfile né guida per i contributori, quindi l'ambiente è a tuo carico: parti dal suo README e consulta la nostra guida al primo contributo per i passaggi generali.
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di wichmann-lab/python-psignifit
-
Bug in plotting routine for negative sigmoidsForse di nuovo libera @guillermoaguilar l’ha presa 365 giorni fa e non c’è nessuna pull request aperta. Aperta
wichmann-lab/python-psignifit#245 · 1 assegnatario ·
-
Add a logoAperta
Difficoltà 5/5 Più di una settimana Idoneità per principianti 20/100
wichmann-lab/python-psignifit#237 ·
-
Documentation styleAperta
Difficoltà 3/5 1-2 giorni Idoneità per principianti 25/100
wichmann-lab/python-psignifit#236 ·
-
Move to a more pythonic APIAperta
Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100
wichmann-lab/python-psignifit#235 ·
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 38/100
wichmann-lab/python-psignifit#229 · 3 commenti ·
Tutte le issue di wichmann-lab/python-psignifit
Issue simili
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 70/100
I maintainer di solito rispondono entro 1 giorno
-
area:docs
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
RailtownAI/railtracks#1633 ·
I maintainer di solito rispondono entro 2 giorni
-
review-panel severity:low
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 85/100
kristovatlas/coin-accounting#152 ·
I maintainer di solito rispondono entro 1 giorno
-
documentation :blue_book:
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 88/100
PennyLaneAI/pennylane#10280 ·
I maintainer di solito rispondono entro 2 giorni
-
`pipx reinstall` prints a Python traceback when the reinstall failsForse già presa @ParamTanna l’ha presa oggi. Apertabug
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
I maintainer di solito rispondono entro 1 giorno