Angel-ML/angel

[CORE] RDMA Support for Angel

Open

#225 geöffnet am 11. Okt. 2017

Auf GitHub ansehen
 (0 Kommentare) (5 Reaktionen) (0 zugewiesene Personen)Java (1.630 Forks)batch import
help wanted

Repository-Metriken

Stars
 (6.686 Stars)
PR-Merge-Metriken
 (Keine gemergten PRs in 30 T)

Beschreibung

In Angel, there's lots of model transformation, which means it will bring large amount of network transformation and costs lots of CPU time.

To improve this, we would like to introduce RDMA, which can bring better network performance and save CPU time. And with these improvement, Angel can achieve better performance and speed up model training time.

Contributor Guide

Research-Richtung
Beginnen Sie mit der Untersuchung der Netzwerkkommunikationsschicht in Angel, wahrscheinlich im Modul `angel ps core`. Recherchieren Sie RDMA Bibliotheken für Java, wie JVerbs oder die RDMA CM Bindings. Schlagen Sie einen High Level Entwurf für die Integration von RDMA in die bestehende Parameter Server Architektur vor, wobei der Schwerpunkt auf Modelltransformations Datenflüssen liegt. Suchen Sie nach bestehenden Diskussionen oder ins Stocken geratenen PRs im Repository.
Tech Stack
java
Domain
backendinfrastructureperformance
Issue Type
Funktion
SchwierigkeitGeschätzte Implementierungsschwierigkeit für neue Contributors, von 1 für sehr kleine Änderungen bis 5 für Expertenarbeit.
4
Geschätzte ZeitEin grober Zeitrahmen, um zu recherchieren, zu implementieren, zu testen und einen Pull Request vorzubereiten.
Über 1 Woche
AktivitätsstatusWie verfügbar das Issue gerade wirkt: frisch, aktiv, stale, blockiert oder wartet auf Maintainer-Input.
Aktiv
KlarheitWie klar das Issue die erwartete Änderung, Akzeptanzkriterien und den nächsten Schritt erklärt.
Meist klar
Voraussetzungen
JavaRDMANetworking
EinsteigerfreundlichkeitEin Score von 1 bis 100, der schätzt, wie zugänglich dieses Issue für First-Time Contributors ist.
20