Pain points in using the test suite
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 5/5
- Tempo stimato
- Più di una settimana
- Idoneità per principianti
- 25/100
Direzione di ricerca
Inizia esaminando le issue collegate 197 e 379, la pull request 380 e i riferimenti a gh-329 e gh-169. Esegui la suite di test con un backend indicato, come JAX o PyTorch, per identificare un problema specifico di ergonomia, quindi conferma il miglioramento proposto con i maintainer prima di considerarlo completato.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
There were reports of several pain points with using the test suite. This is a central tracker for potential improvements of the test suite ergonomics. Things previously reported:
- difficulty in tracking expected failures across libraries. ISTM this is now as good as it gets, I don't know how to improve on the current
--skips-fileand--xfails-fileusage. - https://github.com/data-apis/array-api-tests/issues/197 reported that the test suite is prohibitively slow on
jax. Unclear if it is still a problem after the worst offenders were rewritten a while ago. There are several potential ideas in the issue; what's not clear ATM is whether this is still a problem. And if it is, what are the slowest tests and where is the time spent (for instance, for torch I observed that the slowest tests spent majority of time in the internals ofhypothesis). - https://github.com/data-apis/array-api-tests/issues/379 reported that it is difficult to interpret failures, and https://github.com/data-apis/array-api-tests/pull/380 works towards improving the reporting.
- gh-329 and gh-169 reported issues with optional extensions
If you're using the test suite, we'd like to hear from you. Please add the pain points and/or suggestions for improvement to this issue.
- Lingua principale
- Python
- Stelle
- 74
- Fork
- 54
- Merge medio
- 4h 35m
- PR unite (30g)
- 4
Preparare l'ambiente
Questo progetto non fornisce container di sviluppo, Dockerfile né guida per i contributori, quindi l'ambiente è a tuo carico: parti dal suo README e consulta la nostra guida al primo contributo per i passaggi generali.
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di data-apis/array-api-tests
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 87/100
data-apis/array-api-tests#465 · 1 commento ·
-
Test reflected operators?Aperta
Difficoltà 3/5 1-2 giorni Idoneità per principianti 68/100
data-apis/array-api-tests#460 · 1 commento ·
-
Difficoltà 3/5 1-2 giorni Idoneità per principianti 68/100
data-apis/array-api-tests#455 · 2 commenti ·
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 38/100
data-apis/array-api-tests#379 · 10 commenti ·
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100
data-apis/array-api-tests#368 · 3 commenti ·
Tutte le issue di data-apis/array-api-tests
Issue simili
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 85/100
mozilla/bedrock#17413 · 1 reazione ·
I maintainer di solito rispondono entro 2 giorni
-
instance instance add
Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100
searxng/searx-instances#943 · 1 commento ·
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100
I maintainer di solito rispondono entro 1 giorno
-
bug tools
Difficoltà 2/5 1-3 ore Idoneità per principianti 88/100
I maintainer di solito rispondono entro 1 giorno
-
bug
Difficoltà 2/5 1-3 ore Idoneità per principianti 86/100
lance-format/lance#9655 ·
I maintainer di solito rispondono entro 2 giorni