facebookresearch/fairseq

Providing Models in SafeTensors format

Open

#5257 aperta il 16 lug 2023

Vedi su GitHub
 (0 commenti) (1 reazione) (0 assegnatari)Python (6224 fork)batch import
enhancementhelp wantedneeds triage

Metriche repository

Star
 (29.107 star)
Metriche merge PR
 (Nessuna PR mergiata in 30 g)

Descrizione

Hi,

We are currently utilizing models in our project stored in pickle format. However, after exploring the advantages of SafeTensors in terms of improved security we believe that it will provide us with an extra layer of security and protection against potential vulnerabilities. model link

We wish to inquire about the plans or timeline, if any, regarding the update of models from pickle to SafeTensors:

  • Are there any plans to update the models to SafeTensors?
  • If yes, is there a projected timeline for this migration?

Guida contributor

Direzione di ricerca
Questa issue chiede come convertire i modelli dal formato pickle a SafeTensors. Per affrontarla, controlla prima il repository per eventuali script di conversione SafeTensors esistenti o discussioni correlate. Quindi esplora la documentazione della libreria SafeTensors per i passaggi di conversione. Il file del modello collegato (https://download.pytorch.org/torchaudio/models/wav2vec2 fairseq base ls960 asr ls960.pth) può essere utilizzato come caso di test. Fornisci una raccomandazione sulla fattibilità della conversione e una tempistica approssimativa.
Tech stack
pythonpytorch
Dominio
machine learningsecurity
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
2
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Meno di 1 ora
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
In attesa del maintainer
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
PythonPyTorchmodel serialization
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
20