ggml-org/llama.cpp

tts : add support for Orpheus

Ouverte

#12 476 ouverte le 20 mars 2025

Voir sur GitHubGuide contributeur
 (9 commentaires) (27 réactions) (0 personne assignée)C++ (21 737 forks)batch import
good first issuetts

Métriques du dépôt

Stars
 (124 043 étoiles)
Métriques de merge PR
 (Merge moyen 6j 8h) (389 PRs mergées en 30 j)

Description

HF: https://huggingface.co/collections/canopylabs/orpheus-tts-67d9ea3f6c05a941c06ad9d2

These TTS models seem suitable for supporting. To do that, we need to implement the SNAC audio codec: https://github.com/hubertsiuzdak/snac/

Sample implementation using Python-based inference of SNAC: https://github.com/isaiahbjork/orpheus-tts-local

Similar model support (OuteTTS): https://github.com/ggml-org/llama.cpp/pull/10784 Can be used as a reference how to implement this.

Guide contributeur

Direction de recherche
Étudiez les spécifications du codec audio SNAC et l'implémentation de référence en Python. Examinez la pull request OuteTTS (#10784) dans llama.cpp pour une intégration de modèle similaire. Concevez ensuite l'implémentation en C++ du codec SNAC dans le framework llama.cpp, en suivant les modèles de la PR OuteTTS.
Stack technique
cpp
Domaine
backendmachine learning
Type d'issue
Fonctionnalité
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
3
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
3-5 jours
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Active
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
C++Git
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
60