Provider API rejects audio/video content parts for multimodal models
Dieses Issue hat noch niemand übernommen.
Bewertung
- Schwierigkeit
- 4/5
- Geschätzter Aufwand
- 3-5 Tage
- Anfängerfreundlichkeit
- 48/100
Rechercherichtung
Start at the POST /provider/v1/chat/completions entry point and review the provider documentation describing accepted content parts. Confirm how input_audio and video_url data URLs are validated for the named models, then verify that valid audio and video requests are accepted without breaking existing text and image handling.
Vom Indexierungsmodell aus dem Issue-Text verfasst.
Beschreibung
Feature Description
I’m trying to call these models through the Provider API:
meta/muse-spark-1.3-contributor
Qwen/Qwen3.8-Omni-Flash
using POST https://api.commandcode.ai/provider/v1/chat/completions.
I need to submit:
an MP3 as input_audio
an MP4 as video_url with a Base64 data URL
Both models return:
{
"error": {
"message": "Invalid input",
"type": "invalid_request_error",
"param": "messages.1.content"
}
}
Your provider documentation says “Text and images. Audio, file, and document parts are rejected by the schema,” but Qwen 3.8 Omni Flash is advertised as omni-modal and supports audio/video through its native OpenAI-compatible API.
Use Case
In the case of Qwen 3.8 Omni Flash, media understanding is its main feature. To not support media input would be an oversight. While the Command Code harness itself may not support media, there are a lot of applications that can.
Additional Context
No response
How important is this to you?
Important for my workflow
- Vorherrschende Sprache
- Keine Sprachdaten
- Sterne
- 4k
- Forks
- 350
- PR-Merge-Kennzahlen
- Keine gemergten PRs in 30 T.
Beitragsleitfaden
Für dieses Repository ist kein Beitragsleitfaden indexiert
Erste Schritte
- Lesen Sie das ganze Issue und danach den Beitragsleitfaden des Projekts.
- Schreiben Sie ins Issue, dass Sie es übernehmen — das erspart doppelte Arbeit.
- Forken Sie das Repository und arbeiten Sie in einem Branch.
- Öffnen Sie einen Pull Request, der die Issue-Nummer nennt.
Mehr aus CommandCodeAI/command-code
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 68/100
CommandCodeAI/command-code#903 · 2 Kommentare ·
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 68/100
CommandCodeAI/command-code#855 ·
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 78/100
CommandCodeAI/command-code#841 · 1 Kommentar ·
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 68/100
CommandCodeAI/command-code#655 · 1 Kommentar ·
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 68/100
CommandCodeAI/command-code#608 ·
Alle Issues in CommandCodeAI/command-code
Ähnliche Issues
-
ai-observability bug team/ai-observability
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 78/100
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 74/100
dair-ai/Prompt-Engineering-Guide#810 · 1 Kommentar ·
-
[addtool] DeepZero Offen
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 72/100
gwen001/offsectools_www#2055 ·
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 68/100
UKGovernmentBEIS/inspect_evals#2503 ·
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 88/100
google-gemma/gemma-skills#13 ·