ggml-org/whisper.cpp

Add ability to limit auto-detection to a subset of languages

Open

#1.242 geöffnet am 2. Sept. 2023

Auf GitHub ansehen
 (5 Kommentare) (3 Reaktionen) (0 zugewiesene Personen)C++ (49.693 Stars) (5.535 Forks)batch import
enhancementgood first issue

Beschreibung

From what I can tell, auto-detection simply picks the language with the highest probability score. Sometimes, I know the language could only be 1 out of 5 possible languages. In such cases, it would be useful to be able to specify the possible languages, to improve the likelyhood of the auto-detection picking the correct language.

Contributor Guide

Tech Stack
cpp
Domain
machine learningaibackend
Issue Type
feature
SchwierigkeitGeschätzte Implementierungsschwierigkeit für neue Contributors, von 1 für sehr kleine Änderungen bis 5 für Expertenarbeit.
3
Geschätzte ZeitEin grober Zeitrahmen, um zu recherchieren, zu implementieren, zu testen und einen Pull Request vorzubereiten.
1-3 hours
AktivitätsstatusWie verfügbar das Issue gerade wirkt: frisch, aktiv, stale, blockiert oder wartet auf Maintainer-Input.
fresh
KlarheitWie klar das Issue die erwartete Änderung, Akzeptanzkriterien und den nächsten Schritt erklärt.
clear
Voraussetzungen
C++whisper.cpp codebaselanguage detection logic
EinsteigerfreundlichkeitEin Score von 1 bis 100, der schätzt, wie zugänglich dieses Issue für First-Time Contributors ist.
35
Research-Richtung
First, examine the existing auto detection implementation in whisper.cpp, likely in whisper.cpp or common.cpp, to understand how languages are scored and the highest probability selected. Then, propose a modification to accept a user specified subset of languages (e.g., via an API parameter or environment variable) that filters the candidate languages before scoring. Consider adding a new function or modifying the existing whisper full default params to include a language filter. Test the change with a few languages to ensure detection accuracy improves.