OpenNMT/OpenNMT-tf

Adding benchmarks to Readme

Open

#464 geöffnet am 1. Juli 2019

Auf GitHub ansehen
 (1 Kommentar) (0 Reaktionen) (0 zugewiesene Personen)Python (394 Forks)batch import
documentationhelp wanted

Repository-Metriken

Stars
 (1.428 Stars)
PR-Merge-Metriken
 (Keine gemergten PRs in 30 T)

Beschreibung

Hi, Is it possible to add benchmarks of some models into documentation for comparison purposes ? Also run time would be helpful. For example 1M iteration takes a weekend with GTX 1080.

Contributor Guide

Research-Richtung
Beginnen Sie mit der Erkundung des Repositorys nach vorhandenen Benchmark Skripten oder Modellkonfigurationen. Prüfen Sie, ob es bereits vorkalkulierte Benchmark Ergebnisse an anderer Stelle gibt. Führen Sie die Trainingsskripte auf einer GPU (z.B. GTX 1080) für eine kleine Anzahl von Iterationen aus und erfassen Sie die Zeit pro Iteration und die endgültigen Metriken. Aktualisieren Sie die README.md mit einem neuen Abschnitt 'Benchmarks', der eine Tabelle mit Modellen, verwendeter Hardware und Laufzeit enthält. Verweisen Sie auf relevante Dateien wie 'scripts/benchmark.py' oder 'configs/*.yml'.
Tech Stack
pythontensorflow
Domain
documentationmachine learning
Issue Type
Dokumentation
SchwierigkeitGeschätzte Implementierungsschwierigkeit für neue Contributors, von 1 für sehr kleine Änderungen bis 5 für Expertenarbeit.
1
Geschätzte ZeitEin grober Zeitrahmen, um zu recherchieren, zu implementieren, zu testen und einen Pull Request vorzubereiten.
Unter 1 Stunde
AktivitätsstatusWie verfügbar das Issue gerade wirkt: frisch, aktiv, stale, blockiert oder wartet auf Maintainer-Input.
Frisch
KlarheitWie klar das Issue die erwartete Änderung, Akzeptanzkriterien und den nächsten Schritt erklärt.
Klar
Voraussetzungen
Keine
EinsteigerfreundlichkeitEin Score von 1 bis 100, der schätzt, wie zugänglich dieses Issue für First-Time Contributors ist.
85