facebookresearch/fairseq

Providing Models in SafeTensors format

Open

#5.257 aberto em 16 de jul. de 2023

Ver no GitHub
 (0 comments) (1 reaction) (0 assignees)Python (6.224 forks)batch import
enhancementhelp wantedneeds triage

Métricas do repositório

Stars
 (29.107 stars)
Métricas de merge de PR
 (Nenhuma PRs mesclada em 30d)

Description

Hi,

We are currently utilizing models in our project stored in pickle format. However, after exploring the advantages of SafeTensors in terms of improved security we believe that it will provide us with an extra layer of security and protection against potential vulnerabilities. model link

We wish to inquire about the plans or timeline, if any, regarding the update of models from pickle to SafeTensors:

  • Are there any plans to update the models to SafeTensors?
  • If yes, is there a projected timeline for this migration?

Guia do colaborador

Direção de pesquisa
Esta issue pergunta sobre a conversão de modelos de pickle para SafeTensors. Para resolvê la, primeiro verifique o repositório em busca de scripts de conversão SafeTensors existentes ou discussões relacionadas. Em seguida, explore a documentação da biblioteca SafeTensors para as etapas de conversão. O arquivo de modelo vinculado (https://download.pytorch.org/torchaudio/models/wav2vec2 fairseq base ls960 asr ls960.pth) pode ser usado como um caso de teste. Forneça uma recomendação sobre a viabilidade da conversão e uma estimativa de tempo aproximada.
Pilha de tecnologia
pythonpytorch
Domain
machine learningsecurity
Tipo Issue
Funcionalidade
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
2
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
Menos de 1 hora
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Aguardando mantenedor
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Claro
Prerequisites
PythonPyTorchmodel serialization
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
20