lensacom/sparkit-learn

[RFC] Integrate with numba / parakeet

Open

#26 aperta il 11 giu 2015

Vedi su GitHub
 (0 commenti) (0 reazioni) (0 assegnatari)Python (255 fork)batch import
enhancementhelp wantedrfc

Metriche repository

Star
 (1144 star)
Metriche merge PR
 (Nessuna PR mergiata in 30 g)

Descrizione

Execution time could benefit from an optimizer like numba.

From numba's documentation: "Numba works by generating optimized machine code using the LLVM compiler infrastructure at import time, runtime, or statically (using the included pycc tool). Numba supports compilation of Python to run on either CPU or GPU hardware, and is designed to integrate with the Python scientific software stack."

Guida contributor

Direzione di ricerca
Analizza la codebase di sparkit learn per identificare i colli di bottiglia delle prestazioni, in particolare nelle funzioni di calcolo principali come parallel predict o fit. Rivedi la documentazione e gli esempi di numba per l'integrazione con numpy e scikit learn. Proponi funzioni specifiche da accelerare con numba e fornisci confronti di benchmark per dimostrare i miglioramenti.
Tech stack
pythonscikit learnsparknumpy
Dominio
performancedatamachine learning
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
4
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Oltre 1 settimana
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Datata
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Poco chiara
Prerequisiti
numba basicsPython and numpyPySparkscikit learn
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
10