mlcommons/storage

Vedi su GitHub

MLPerf® Storage Benchmark Suite

Stelle: 203
Fork: 67
Issue aperte per principianti: 1
Issue indicizzate: 70
Merge medio: 15m
PR unite (30g): 30

Lingua principale: Python
Licenza: Apache-2.0
Ultimo push su GitHub: 20/9/2026
Ultima indicizzazione: 19/9/2026
Guida per i contributori: Guida per i contributori
Codice di condotta: Nessun codice di condotta
Label per principianti: Nessuna label per principianti indicizzata

Adatte ai principianti Tutto

Aperta Tutte

Rules.md 4.6.2 "more than 4 accelerators per host": working-group disposition needed — 7 v3.0 orgs (and 4 v2.0 rows) ran exactly 4 per host Aperta

mlpstorage Rules

Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100

mlcommons/storage#866 · Aperta il 20/9/2026
Running KVcache after VectorDB causes a hang in cluster_collector.py Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 45/100

mlcommons/storage#843 · 1 commento · Aperta il 11/8/2026
Finite replay cycles drop queued requests Aperta

Future KVCache TF

mlcommons/storage#839 · 1 assegnatario · Aperta il 2/8/2026
Rules.md does not describe public_ids.json, which reportgen now writes into submission packages Aperta

Future mlpstorage Rules

Difficoltà 4/5 3-5 giorni Idoneità per principianti 45/100

mlcommons/storage#838 · Aperta il 30/7/2026
KV cache: seeded runs produce different logical file-I/O workloads Aperta

Future KVCache TF

Difficoltà 5/5 Più di una settimana Idoneità per principianti 45/100

mlcommons/storage#822 · 7 commenti · Aperta il 20/7/2026
[Bug] MLPStorage Validation Fails with "Expected 6 run files, but found 12" for RetinaNet on Both B200 and MI355 Aperta

mlcommons/storage#679 · 5 commenti · 1 assegnatario · Aperta il 5/7/2026
DLIO summary.json: host_memory_GB / host_cpu_count arrays are per-nnodes-slot, not per-host — positional access is broken Aperta

DLIO or mlpstorage Future

mlcommons/storage#676 · 1 assegnatario · Aperta il 5/7/2026
Clarification on client host memory requirement for 1T model checkpointing – changed between v2.0 and v3.0? Aperta

documentation Rules

Difficoltà 3/5 1-2 giorni Idoneità per principianti 48/100

mlcommons/storage#518 · 3 commenti · Aperta il 25/6/2026
^C doesn't abort all the worker processes Aperta

Future

mlcommons/storage#515 · 1 assegnatario · Aperta il 25/6/2026
Enforce --data-dir post-YAML for all training commands; eliminate inherited DLIO YAML default Aperta

Future

Difficoltà 4/5 3-5 giorni Idoneità per principianti 74/100

mlcommons/storage#508 · 1 commento · Aperta il 24/6/2026
Intermittent errors between epochs Aperta

bug DLIO or mlpstorage Future

Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100

mlcommons/storage#499 · 2 commenti · Aperta il 23/6/2026
DISKANN 10M×1536-dim recall requires search_list=4000 to reach 95%, causing unacceptable latency and throughput Aperta

VectorDB TF

mlcommons/storage#425 · 6 commenti · 1 assegnatario · Aperta il 10/6/2026
KVCache: eviction-driven tier I/O is excluded from latency P95 SLA checks (Storage/CPU write & read latencies never recorded in _demote_entry) Aperta

Future KVCache TF

Difficoltà 3/5 1-2 giorni Idoneità per principianti 72/100

mlcommons/storage#421 · 2 commenti · 1 reazione · Aperta il 9/6/2026
[Training 3.0] Add interlock file to data directories Aperta

enhancement Training

Difficoltà 4/5 3-5 giorni Idoneità per principianti 45/100

mlcommons/storage#390 · Aperta il 26/5/2026
[Training v3.0 consolidation] Ensure the Parquet data generator delivers reasonable generation throughput Aperta

enhancement Future PASS Score Blocker Training

Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100

mlcommons/storage#358 · Aperta il 27/4/2026
[Training v3.0 consolidation] Evaluate Parquet reader performance in FLUX to validate it can meet target throughput Aperta

enhancement Future PASS Score Blocker Training

Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100

mlcommons/storage#357 · Aperta il 27/4/2026
[Training v3.0 consolidation] Keep a single Parquet file handle open in the FLUX reader to avoid row group cache eviction Aperta

enhancement Future PASS Score Blocker Training

Difficoltà 4/5 3-5 giorni Idoneità per principianti 48/100

mlcommons/storage#356 · Aperta il 27/4/2026
[Training v3.0 consolidation] Evaluate Arrow IPC as alternative format for DLRM Aperta

enhancement Future PASS Score Blocker Training

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

mlcommons/storage#355 · Aperta il 27/4/2026
[Training v3.0 consolidation] DLRM optimization: evaluate Parquet reader and generation parameters to improve throughput Aperta

enhancement Future PASS Score Blocker Training

Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100

mlcommons/storage#354 · 5 commenti · Aperta il 27/4/2026
[Training v3.0 consolidation] Confirm computation time step for DLRM Aperta

bug Future PASS Score Blocker Training

Difficoltà 3/5 1-2 giorni Idoneità per principianti 48/100

mlcommons/storage#353 · Aperta il 27/4/2026
ValueError: 'parquet' is not a valid FormatType when using mlpstorage training datagen Aperta

Future

Difficoltà 3/5 1-2 giorni Idoneità per principianti 45/100

mlcommons/storage#336 · Aperta il 15/4/2026
KVCache Verify client CPU choice has minimal influence on results Aperta

Future KVCache TF

Difficoltà 4/5 3-5 giorni Idoneità per principianti 48/100

mlcommons/storage#334 · 1 commento · Aperta il 14/4/2026
[Proposal] Evaluate Arrow IPC format for reader Aperta

enhancement Future

Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100

mlcommons/storage#333 · 3 commenti · Aperta il 14/4/2026
mlpstorage error with proxy, needs httpx[socks] Aperta

enhancement Future

Difficoltà 3/5 1-2 giorni Idoneità per principianti 45/100

mlcommons/storage#332 · 3 commenti · Aperta il 14/4/2026
mlpstorage training run --model=flux has considerably lower I/O Throughput causing train_au_meet_expectation to fail Aperta

bug Future

Difficoltà 4/5 3-5 giorni Idoneità per principianti 45/100

mlcommons/storage#330 · 6 commenti · Aperta il 12/4/2026
dlio_s3torch_checkpoint fails with TLS (SSL) negotiation failed errors Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 48/100

mlcommons/storage#327 · 1 commento · Aperta il 9/4/2026
Add S3 config parameters to flux/dlrm/retinanet yaml files Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 68/100

mlcommons/storage#326 · 2 commenti · Aperta il 9/4/2026
workload yaml files with hard coded endpoint_url resulting in DLIO workloads to S3 storage fail Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 48/100

mlcommons/storage#325 · 5 commenti · Aperta il 8/4/2026
[Passing score blocker] `ParquetReader` involves a CPU time in `get_sample` 5x / 4x times longer than the I/O time Aperta

bug Future

Difficoltà 4/5 3-5 giorni Idoneità per principianti 45/100

mlcommons/storage#323 · 1 commento · Aperta il 8/4/2026
How do we create the python env on worker nodes? Aperta

DLIO or mlpstorage

Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100

mlcommons/storage#309 · Aperta il 3/4/2026
Add Object parameters to all the workload yaml files Aperta

enhancement

Difficoltà 3/5 1-2 giorni Idoneità per principianti 55/100

mlcommons/storage#291 · 1 commento · Aperta il 26/3/2026
NPZ CRC Checksum overhead for File I/O - Expansion of issue #223 Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 45/100

mlcommons/storage#286 · 1 reazione · Aperta il 23/3/2026
KV-Cache does not support Object Storage Aperta

Future KVCache TF

Difficoltà 4/5 3-5 giorni Idoneità per principianti 48/100

mlcommons/storage#285 · 3 commenti · Aperta il 23/3/2026
KVCache: Prefix Cache Implementation Does Not Match Design Specification Aperta

enhancement Future KVCache TF

mlcommons/storage#283 · 3 commenti · 1 assegnatario · Aperta il 20/3/2026
retinanet runs forever without generating I/O Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100

mlcommons/storage#258 · 1 commento · Aperta il 3/3/2026
Turn off the CRC check in DLIO's use of numpy.load() Aperta

mlcommons/storage#223 · 1 assegnatario · Aperta il 9/1/2026
KVBench - Add support for different random distributions (random, uniform, zipfian) when selecting chunks for RAG usecase Aperta

enhancement KVCache TF

Difficoltà 4/5 3-5 giorni Idoneità per principianti 48/100

mlcommons/storage#216 · 2 commenti · Aperta il 25/11/2025
mlpstorage arguments have confusing names that conflict with IEC standards Aperta

Difficoltà 2/5 1-3 ore Idoneità per principianti 62/100

mlcommons/storage#207 · 1 commento · Aperta il 17/10/2025
RockyLinux / RHEL support? Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

mlcommons/storage#206 · Aperta il 16/10/2025
The problem that the reader.read_thread parameter does not utilize as much as the actual number of nproc. Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 38/100

mlcommons/storage#205 · 1 commento · Aperta il 13/10/2025
What it mean ? : [WARNING] Running DLIO with 32 threads for I/O but core available 2 are insufficient and can lead to lower performance. Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 35/100

mlcommons/storage#202 · 7 commenti · Aperta il 23/9/2025
I was wondering if the cpu-bind option is released or if there are cases where the numa-core allocation may not be done properly. Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 20/100

mlcommons/storage#201 · 1 commento · Aperta il 16/9/2025
Error creating dataset with resnet50/cosmoflow using multiple hosts Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 45/100

mlcommons/storage#200 · Aperta il 15/9/2025
mlpstorage checkpointing datasize run failed Aperta

Difficoltà 2/5 1-3 ore Idoneità per principianti 35/100

mlcommons/storage#198 · 2 commenti · Aperta il 8/9/2025
PMIX ERR NOMEM error, but the test can still run Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100

mlcommons/storage#197 · 3 commenti · Aperta il 1/9/2025
`--exec-type=docker` Launches Only a Single Process, Ignores `--num-accelerators` Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 50/100

mlcommons/storage#196 · 1 commento · Aperta il 12/8/2025
Accelerator's count and read_thread's count were used as criteria for sweep evaluation, but the results are confusing. Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 28/100

mlcommons/storage#195 · Aperta il 12/8/2025
The rules need to define how consistent runs need to be Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

mlcommons/storage#194 · Aperta il 25/7/2025
DFTracer trace files not generated and missing hydra_log folder with profiling and logging enabled Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100

mlcommons/storage#191 · Aperta il 9/7/2025
Memory requirements for checkpointing workloads are not clear and possibly buggy. Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100

mlcommons/storage#188 · Aperta il 3/7/2025

mlcommons/storage

Ricevi le nuove issue nella tua casella