[Feature] Follow up on #162: sparse tensor SSD offload and io_uring
I maintainer di solito rispondono entro 1 giorno
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Idoneità per principianti
- 45/100
- Tipo di issue
- Funzionalità
- Chiarezza
- Abbastanza chiara
- Stato di attività
- Attiva
- Stack tecnologico
- python
- Ambito
- backend, performance
Direzione di ricerca
Review PR #162 to understand the current SimpleStorage SSD offload implementation. For sparse tensor support, examine how tensors are currently handled and identify the differences for sparse types. For io_uring, research existing Python libraries (e.g., liburing bindings) and design a benchmark to compare against the current I/O methods. The work involves modifying storage backend code and adding performance tests.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Background
PR #162 introduced SSD offload for SimpleStorage. Two suggestions from its review were deferred to follow-up PRs.
Follow-up work
- Support SSD offload for sparse tensors, which currently remain in host memory.
- Evaluate existing
io_uringlibraries and addio_uringsupport for SimpleStorage SSD I/O, with benchmarks against the current implementation.
Related PR: #162
- Lingua principale
- Python
- Stelle
- 168
- Fork
- 56
- Merge medio
- 4g 1h
- PR unite (30g)
- 15
Preparare l'ambiente
Questo progetto non fornisce container di sviluppo, Dockerfile né guida per i contributori, quindi l'ambiente è a tuo carico: parti dal suo README e consulta la nostra guida al primo contributo per i passaggi generali.
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di Ascend/TransferQueue
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
Ascend/TransferQueue#194 ·
I maintainer di solito rispondono entro 1 giorno
-
[doc] Document the contract of storage-side callables (data_parser, merge_fn) with a tutorialAperta
Difficoltà 4/5 3-5 giorni Idoneità per principianti 55/100
Ascend/TransferQueue#195 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 30/100
Ascend/TransferQueue#188 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100
Ascend/TransferQueue#173 · 2 commenti · 1 reazione ·
I maintainer di solito rispondono entro 1 giorno
-
[optim] MooncakeStore read path registers RDMA buffers on every get(), dominating end-to-end timeForse di nuovo libera @weiziyoung l’ha presa 41 giorni fa e non c’è nessuna pull request aperta. Apertaenhancement
Ascend/TransferQueue#169 · 3 commenti · 1 reazione · 2 assegnatari ·
I maintainer di solito rispondono entro 1 giorno
Tutte le issue di Ascend/TransferQueue
Issue simili
-
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 85/100
521xueweihan/HelloGitHub#4115 ·
-
get_lldp_neighbors_detail: query asks for 'max-address' (typo for 'mac-address'), so remote_chassis_id is always emptyForse già presa @Jah-yee l’ha presa oggi. Aperta
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 88/100
-
lesson-submission pending-review
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 74/100
Ikalus1988/MisakaNet#3899 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100
aws-samples/sample-per-model-bedrock#549 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 90/100