sharkdp/fd

scatter search targets of threads to optimize search across multiple devices

Open

#559 aperta il 6 apr 2020

Vedi su GitHub
 (9 commenti) (0 reazioni) (0 assegnatari)Rust (1059 fork)batch import
feature-requesthelp wantedperformance

Metriche repository

Star
 (42.984 star)
Metriche merge PR
 (Merge medio 15g 23h) (16 PR mergiate in 30 g)

Descrizione

when searching across multiple devices, cpu utilization is rarely the bottleneck but rather io is.

an option to scatter the search targets of threads would speed up search massively when searching in /media/ for example across multiple external harddrives.

they may share a data link but its their latency and responsiveness that is the bottleneck. and can be exercised in parallel.

Guida contributor

Direzione di ricerca
Esamina l'attuale pool di thread e la logica di scansione dei file per aggiungere un'opzione che distribuisca i target di ricerca tra i thread per parallelizzare l'I/O tra i dispositivi.
Tech stack
rust
Dominio
cliperformance
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
3
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Mezza giornata
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
RustGit
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
65