mozilla/DeepSpeech

Replace LDC93S1 sample in prod tests with something else

Open

#2 732 ouverte le 10 févr. 2020

Voir sur GitHub
 (1 commentaire) (0 réactions) (0 assignés)C++ (4 093 forks)batch import
good first bughelp wanted

Métriques du dépôt

Stars
 (26 755 stars)
Métriques de merge PR
 (Aucune PR mergée en 30 j)

Description

LDC93S1 prod model outputs vary wildly across versions of the prod model and our inference runtime, because we don't train with anything like TIMIT, so predictions are not confident. We should use some sample from eg. LibriSpeech that will be more stable across changes to prod model and avoid wasting time waiting for test results every time something has to be changed there.

Guide contributeur

Direction de recherche
Trouvez le fichier de test qui utilise l'echantillon LDC93S1, comprenez la configuration du test et remplacez le par un echantillon de LibriSpeech qui produit des resultats coherents entre les versions du modele.
Stack technique
cpp
Domaine
testingmachine learning
Type d'issue
Test
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
2
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
1-3 heures
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Active
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
Git
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
80