Do we really need java2cpp ?
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 5/5
- Tempo stimato
- Più di una settimana
- Idoneità per principianti
- 25/100
- Tipo di issue
- Refactoring
- Chiarezza
- Da chiarire
- Stato di attività
- Ferma
- Stack tecnologico
- scala, spark, tensorflow
- Ambito
- data-engineering, machine-learning, performance
Direzione di ricerca
Inizia leggendo tensorflow/core/framework/tensor.proto e l’esempio di prestazioni K-Means collegato, quindi traccia il percorso di conversione java2cpp corrente in tensorframes. Determina se la conversione protobuf e il caching affrontano il costo di conversione Spark/TensorFlow segnalato; una decisione concreta e un piano di implementazione circoscritto definirebbero quando il lavoro è completato.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Since tensorflow.tensor also support protobuf
I saw there would be a performance issue here
about 80% of this time is spent on slow data conversions between Spark and TensorFlow
would it worth it to convert data into proto and cache it if needed
- Lingua principale
- Scala
- Stelle
- 743
- Fork
- 158
- Metriche di merge delle PR
- Nessuna PR unita negli ultimi 30g
Guida per i contributori
Nessuna guida per i contributori indicizzata per questo repository
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di databricks/tensorframes
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 20/100
databricks/tensorframes#185 ·
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100
databricks/tensorframes#181 ·
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 30/100
databricks/tensorframes#179 ·
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 15/100
databricks/tensorframes#176 · 2 commenti ·
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 30/100
databricks/tensorframes#165 ·
Tutte le issue di databricks/tensorframes
Issue simili
-
ShuffleManagerRegistry.register recursion guard is inverted, permits GlutenShuffleManager subclasses Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
-
enhancement
Difficoltà 2/5 1-3 ore Idoneità per principianti 65/100
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
-
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 70/100