ggml-org/llama.cpp

Feature Request: support Qwen3-omni, Qwen3-TTS and MiniCPM-o

Fechada

#17.634 aberto em 1 de dez. de 2025

Ver no GitHubGuia do colaborador
 (14 comentários) (29 reações) (0 responsável)C++ (21.822 forks)batch import
Review Complexity : Highenhancementgood first issuehelp wantedmtmdtts

Métricas do repositório

Stars
 (124.374 estrelas)
Métricas de merge de PR
 (Mesclagem média 6d 8h) (389 fundiu PRs em 30d)

Description

Prerequisites

  • I am running the latest code. Mention the version if possible as well.
  • I carefully followed the README.md.
  • I searched using keywords relevant to my issue to make sure that I am creating a new issue that is not already open (or closed).
  • I reviewed the Discussions, and have a new and useful enhancement to share.

Feature Description

support qwen omni audio generator

Motivation

currently omni can work but it does not provide a whisper-like api for tts and it does not support asr.

Possible Implementation

https://github.com/ggml-org/llama.cpp/issues/16885 https://github.com/ggml-org/llama.cpp/issues/16186 https://github.com/ggml-org/llama.cpp/issues/11347

Guia do colaborador

Direção de pesquisa
Revise os problemas vinculados e o código existente para suporte TTS/ASR no llama.cpp. Entenda as arquiteturas dos modelos Qwen3 omni, Qwen3 TTS e MiniCPM o. Identifique as alterações necessárias no pipeline de inferência e no processamento de áudio.
Pilha de tecnologia
cpp
Domain
backendapiai
Tipo Issue
Funcionalidade
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
4
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
Mais de 1 semana
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Principalmente claro
Prerequisites
C++Git
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
25