feat(android): add streamed and live transcription with word timings
Los mantenedores suelen responder en 1 día
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 4/5
- Tiempo estimado
- 3-5 días
- Aptitud para principiantes
- 35/100
- Tipo de issue
- Nueva funcionalidad
- Claridad
- Bastante claro
- Estado de actividad
- Activo
- Stack tecnológico
- kotlin, typescript
- Área
- mobile-dev
Línea de trabajo
Start in the @react-native-ai/android package: read the existing AudioSource.fromFile transcription path, then the ML Kit genai-speech-recognition docs for fromMic/fromPfd and enableWordTiming. Design how streamed PCM chunks and a live microphone API would map onto experimental_streamTranscribe and Apple's transcribeLive shape. Note the issue itself flags that en-US is unavailable on the only test device, so testing needs another device — done means streaming and live transcription producing segments from word timings.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
@react-native-ai/android transcribes whole files with AudioSource.fromFile. ML Kit's speech recognition (genai-speech-recognition 1.0.0-alpha2) also takes AudioSource.fromMic() and fromPfd (16 kHz mono 16-bit PCM), with partial results and word timings (recognitionOptions { enableWordTiming = true }), which only work with streamed sources.
These could back experimental_streamTranscribe (PCM chunks) and a live microphone API like Apple's transcribeLive, with segments from the word timings.
Note: on the test Pixel 9 Pro (AICore aicore_20260219), checkStatus reports en-US unavailable in both basic and advanced mode, so this needs another device to test.
- Lenguaje dominante
- TypeScript
- Estrellas
- 1.4k
- Forks
- 64
- Merge medio
- 11 h 24 min
- PR fusionados (30 d)
- 91
Preparar el entorno
- Sin Dockerfile ni archivo de Docker Compose
- Sin plantilla de pull request
- Leer la guía de contribución
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de callstackincubator/ai
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 62/100
callstackincubator/ai#378 ·
Los mantenedores suelen responder en 1 día
-
enhancement
Dificultad 5/5 Más de una semana Aptitud para principiantes 20/100
callstackincubator/ai#366 · 1 comentario ·
Los mantenedores suelen responder en 1 día
-
enhancement
Dificultad 4/5 3-5 días Aptitud para principiantes 20/100
callstackincubator/ai#365 · 2 comentarios ·
Los mantenedores suelen responder en 1 día
-
Blocked enhancement
Dificultad 3/5 1-2 días Aptitud para principiantes 30/100
callstackincubator/ai#364 · 1 comentario ·
Los mantenedores suelen responder en 1 día
-
Blocked enhancement
Dificultad 4/5 3-5 días Aptitud para principiantes 45/100
callstackincubator/ai#362 · 1 comentario ·
Los mantenedores suelen responder en 1 día
Todos los issues de callstackincubator/ai
Issues similares
-
Dificultad 1/5 Menos de una hora Aptitud para principiantes 72/100
cursor/community-plugins#583 ·
Los mantenedores suelen responder en 1 día
-
A model answer with prose after its fenced JSON is rejected as NOT_JSONPosiblemente ocupada Un pull request vinculado a esta issue está abierto o ya se fusionó. Abiertoafk-ok importer size:S
Dificultad 2/5 1-3 horas Aptitud para principiantes 72/100
enorm-labs/event-junkie#5404 ·
Los mantenedores suelen responder en 1 día
-
Dificultad 1/5 Menos de una hora Aptitud para principiantes 82/100
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 68/100
Wavvon/Wavvon-clients#493 ·
Los mantenedores suelen responder en 1 día
-
documentation
Dificultad 1/5 1-3 horas Aptitud para principiantes 72/100
answerLoops/answerLoops#679 ·
Los mantenedores suelen responder en 1 día