Implement `RecordSizer.fromDirectorySize` method
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Idoneità per principianti
- 35/100
- Tipo di issue
- Funzionalità
- Chiarezza
- Da chiarire
- Stato di attività
- Ferma
- Stack tecnologico
- scala, spark
- Ambito
- data-engineering
Direzione di ricerca
Inizia individuando il metodo RecordSizer.fromDirectorySize ed esaminando la gestione esistente delle dimensioni della directory a cui si fa riferimento da Enceladus, insieme al modo in cui il codice attuale ottiene il numero di record. Il lavoro è completato quando il metodo ricava una dimensione media del record dalle dimensioni e dal numero di record della directory fornita; l’issue non indica alcun test o file da eseguire.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Background
To be able to get the average record size based on the data output in the provided directory.
Feature
Implement RecordSizer.fromDirectorySize method
Proposed Solution [Optional]
Read the directory size similarly as Enceladus does, then read the data to get the record count.
- Lingua principale
- Scala
- Stelle
- 9
- Fork
- 2
- Metriche di merge delle PR
- Nessuna PR unita negli ultimi 30g
Preparare l'ambiente
Questo progetto non fornisce container di sviluppo, Dockerfile né guida per i contributori, quindi l'ambiente è a tuo carico: parti dal suo README e consulta la nostra guida al primo contributo per i passaggi generali.
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di AbsaOSS/spark-partition-sizing
-
bug
Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100
-
enhancement
Difficoltà 3/5 1-2 giorni Idoneità per principianti 48/100
-
enhancement
Difficoltà 5/5 Più di una settimana Idoneità per principianti 22/100
-
enhancement
Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100
Tutte le issue di AbsaOSS/spark-partition-sizing
Issue simili
-
bug
Difficoltà 2/5 1-3 ore Idoneità per principianti 88/100
I maintainer di solito rispondono entro 3 giorni
-
? - Needs Triage bug
Difficoltà 2/5 1-3 ore Idoneità per principianti 82/100
NVIDIA/cudf-spark#16869 ·
I maintainer di solito rispondono entro 1 giorno
-
Area: PDF support
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 68/100
orbeon/orbeon-forms#8080 ·
I maintainer di solito rispondono entro 2 giorni
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 66/100
software-mansion/starknet-jvm#652 ·
I maintainer di solito rispondono entro 2 giorni
-
bug data
Difficoltà 2/5 1-3 ore Idoneità per principianti 84/100
propensive/soundness#2480 ·
I maintainer di solito rispondono entro 1 giorno