mozilla/DeepSpeech

Replace LDC93S1 sample in prod tests with something else

Open

#2.732 aberto em 10 de fev. de 2020

Ver no GitHub
 (1 comment) (0 reactions) (0 assignees)C++ (4.093 forks)batch import
good first bughelp wanted

Métricas do repositório

Stars
 (26.755 stars)
Métricas de merge de PR
 (Nenhuma PRs mesclada em 30d)

Description

LDC93S1 prod model outputs vary wildly across versions of the prod model and our inference runtime, because we don't train with anything like TIMIT, so predictions are not confident. We should use some sample from eg. LibriSpeech that will be more stable across changes to prod model and avoid wasting time waiting for test results every time something has to be changed there.

Guia do colaborador

Direção de pesquisa
Encontre o arquivo de teste que usa a amostra LDC93S1, entenda a configuração do teste e substitua por uma amostra do LibriSpeech que produza resultados consistentes entre as versões do modelo.
Pilha de tecnologia
cpp
Domain
testingmachine learning
Tipo Issue
Teste
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
2
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
1-3 horas
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Claro
Prerequisites
Git
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
80