facebookresearch/fairseq

Providing Models in SafeTensors format

Open

#5 257 ouverte le 16 juil. 2023

Voir sur GitHub
 (0 commentaires) (1 réaction) (0 assignés)Python (6 224 forks)batch import
enhancementhelp wantedneeds triage

Métriques du dépôt

Stars
 (29 107 stars)
Métriques de merge PR
 (Aucune PR mergée en 30 j)

Description

Hi,

We are currently utilizing models in our project stored in pickle format. However, after exploring the advantages of SafeTensors in terms of improved security we believe that it will provide us with an extra layer of security and protection against potential vulnerabilities. model link

We wish to inquire about the plans or timeline, if any, regarding the update of models from pickle to SafeTensors:

  • Are there any plans to update the models to SafeTensors?
  • If yes, is there a projected timeline for this migration?

Guide contributeur

Direction de recherche
Cette issue demande comment convertir des modèles du format pickle vers SafeTensors. Pour y répondre, vérifiez d'abord le dépôt pour tout script de conversion SafeTensors existant ou discussions connexes. Ensuite, explorez la documentation de la bibliothèque SafeTensors pour les étapes de conversion. Le fichier de modèle lié (https://download.pytorch.org/torchaudio/models/wav2vec2 fairseq base ls960 asr ls960.pth) peut être utilisé comme cas de test. Fournissez une recommandation sur la faisabilité de la conversion et un calendrier approximatif.
Stack technique
pythonpytorch
Domaine
machine learningsecurity
Type d'issue
Fonctionnalité
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
2
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
Moins d'une heure
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
En attente d'un mainteneur
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
PythonPyTorchmodel serialization
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
20