sharkdp/fd

scatter search targets of threads to optimize search across multiple devices

Open

#559 aberto em 6 de abr. de 2020

Ver no GitHub
 (9 comments) (0 reactions) (0 assignees)Rust (1.059 forks)batch import
feature-requesthelp wantedperformance

Métricas do repositório

Stars
 (42.984 stars)
Métricas de merge de PR
 (Mesclagem média 15d 23h) (16 fundiu PRs em 30d)

Description

when searching across multiple devices, cpu utilization is rarely the bottleneck but rather io is.

an option to scatter the search targets of threads would speed up search massively when searching in /media/ for example across multiple external harddrives.

they may share a data link but its their latency and responsiveness that is the bottleneck. and can be exercised in parallel.

Guia do colaborador

Direção de pesquisa
Examine o pool de threads atual e a lógica de travessia de arquivos para adicionar uma opção que distribua os alvos de busca entre threads para paralelizar I/O entre dispositivos.
Pilha de tecnologia
rust
Domain
cliperformance
Tipo Issue
Funcionalidade
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
3
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
Meio dia
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Claro
Prerequisites
RustGit
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
65