OpenNMT/OpenNMT-tf

Adding benchmarks to Readme

Open

#464 ouverte le 1 juil. 2019

Voir sur GitHub
 (1 commentaire) (0 réactions) (0 assignés)Python (394 forks)batch import
documentationhelp wanted

Métriques du dépôt

Stars
 (1 428 stars)
Métriques de merge PR
 (Aucune PR mergée en 30 j)

Description

Hi, Is it possible to add benchmarks of some models into documentation for comparison purposes ? Also run time would be helpful. For example 1M iteration takes a weekend with GTX 1080.

Guide contributeur

Direction de recherche
Commencez par explorer le dépôt à la recherche de scripts de benchmark existants ou de configurations de modèle. Vérifiez s'il existe des résultats de benchmark précalculés ailleurs. Exécutez les scripts d'entraînement sur un GPU (par exemple GTX 1080) pour un petit nombre d'itérations et enregistrez le temps par itération et les métriques finales. Mettez à jour le README.md avec une nouvelle section 'Benchmarks' incluant un tableau des modèles, du matériel utilisé et du temps d'exécution. Référencez tout fichier pertinent comme 'scripts/benchmark.py' ou 'configs/*.yml'.
Stack technique
pythontensorflow
Domaine
documentationmachine learning
Type d'issue
Documentation
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
1
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
Moins d'une heure
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Récente
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
Aucun
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
85