clab/dynet

Implement binary io for faster/lighter serialization

Open

#648 aberto em 30 de jun. de 2017

Ver no GitHub
 (8 comments) (0 reactions) (0 assignees)C++ (701 forks)github user discovery
enhancementgood first issue

Métricas do repositório

Stars
 (3.433 stars)
Métricas de merge de PR
 (Métricas PR pendentes)

Description

Saving a medium sized seq2seq model takes between 2x and 4x longer as before, is anyone else experiencing something similar?

EDIT: some more information:

  • the model weighs 340MB once saved (which is less than before 2.0)
  • There are 3 subcollections

Guia do colaborador

Direção de pesquisa
Examine o código de serialização atual no DyNet, identifique gargalos de desempenho e proponha um formato de serialização binária. Considere o uso de bibliotecas existentes como Protocol Buffers ou codificação binária personalizada.
Pilha de tecnologia
cpp
Domain
machine learning
Tipo Issue
Performance
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
3
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
1-2 dias
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Precisa de investigação
Prerequisites
C++Git
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
45