RVC-Project/Retrieval-based-Voice-Conversion-WebUI

Why Very Big Spike in Learning Curve

Open

#1.743 aberto em 19 de jan. de 2024

Ver no GitHub
 (1 comment) (0 reactions) (0 assignees)Python (2.849 forks)batch import
bughelp wanted

Métricas do repositório

Stars
 (18.427 stars)
Métricas de merge de PR
 (Nenhuma PRs mesclada em 30d)

Description

As you see in the below image the curve is almost ok till 10K steps then it again goes to 9K steps backward and then again goes forward. why this happened ? is something wrong ?

Screenshot 2024-01-19 152016

This spike is shows in all graphs.

Screenshot 2024-01-19 152102

Guia do colaborador

Direção de pesquisa
Investigue as causas comuns de picos nas curvas de aprendizado durante o treinamento, como agendamento da taxa de aprendizado, variações no tamanho do lote, embaralhamento de dados ou instabilidade do modelo. Verifique se o pico está correlacionado com mudanças no conjunto de dados ou carregamento de checkpoint. Revise os logs de treinamento e hiperparâmetros.
Pilha de tecnologia
python
Domain
machine learningai
Tipo Issue
Pesquisa
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
3
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
Meio dia
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Principalmente claro
Prerequisites
PythonBasic understanding of deep learning training
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
65