[Feature Request] Add real-time streaming transcription as a selectable voice input mode

Đang mở
  • Có gì không ổn?
#766 0 bình luận 0 reaction 0 người được giao Xem trên GitHub

Maintainer thường phản hồi trong vòng 1 ngày

Chưa có ai nhận issue này.

Đánh giá

Độ khó
5/5
Thời gian dự kiến
Hơn một tuần
Mức phù hợp với người mới
35/100
Loại issue
Tính năng
Độ rõ ràng
Khá rõ ràng
Mức độ hoạt động
Sôi nổi
Công nghệ
android, kotlin
Lĩnh vực
mobile

Hướng nghiên cứu

Start by reading the Voice Plugin documentation mentioned in the issue and tracing the existing offline record-then-transcribe flow. Identify where voice input modes and recording controls are handled; the issue does not name specific files or tests. Done means users can select streaming or batch transcription, with silence timeout and manual controls supported in both modes.

Do mô hình lập chỉ mục viết ra từ nội dung của issue.

Mô tả

enhancement

Is your feature request related to a problem?
Currently, LeanType's offline voice input operates in a record-then-transcribe workflow. The user must finish recording and press the checkmark before any recognized text is inserted into the active text field.

There does not appear to be an option for real-time streaming transcription, despite the Voice Plugin documentation describing recognized text as streaming directly into the active input field.

Describe the solution you'd like
Provide an option to choose between two voice input modes:

  1. Streaming transcription: Recognized text is progressively inserted into the active text field while the user speaks, without requiring the recording to finish first.
  2. Batch transcription: Retain the existing workflow, where audio is recorded first and transcribed when recording ends.

Ideally, both modes would support the existing silence timeout and manual recording controls.

Use case
For everyday voice typing, particularly longer messages, emails, and notes, streaming transcription would allow users to see what has been recognized as they speak.

This provides immediate feedback, makes it easier to identify recognition errors, and avoids having to wait until the end of a recording to discover that portions of speech were missed.

Batch transcription would remain useful when users prefer to dictate an entire passage before reviewing the result.

Alternatives considered
The current batch transcription workflow works for shorter dictation, but requires recording to finish before the user can review any recognized text.

Dictating in shorter segments provides more frequent feedback, but interrupts the natural flow of speaking.

Other keyboards and voice input applications offer progressive transcription.

App version & Flavor

  • LeanType: v4.3.1, Offline
  • Voice Plugin: v1.0.1
  • Whisper Base (~57 MB)
Ngôn ngữ chính
Kotlin
Star
1k
Fork
59
Merge trung bình
14 giờ 9 phút
Pull request đã merge (30 ngày)
56

Chuẩn bị môi trường

Bắt đầu từ đâu

  1. Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
  2. Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
  3. Fork repository và làm thay đổi trên một nhánh.
  4. Mở pull request có tham chiếu số hiệu của issue.

Issue khác của LeanBitLab/LeanType

Tất cả issue của LeanBitLab/LeanType

Issue tương tự

Thêm issue về Kotlin

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.