[M1] Pipeline audio complet : téléchargement → conversion → transcription → cache SQLite #189

New issue

Closed

opened 2026-04-06 08:52:22 +00:00 by charles · 0 comments

charles commented

2026-04-06 08:52:22 +00:00

Owner

Contexte

Orchestrer le flux complet de transcription d'un message vocal Matrix : depuis le téléchargement du media jusqu'à l'affichage du résultat mis en cache.

Critères d'acceptation

Pipeline en 5 étapes : (1) téléchargement via matrix-rust-sdk → Vec<u8>, (2) conversion opus/webm → WAV 16kHz mono via GStreamer, (3) envoi au moteur STT sélectionné, (4) mise en cache SQLite avec clé event_id, (5) retour du Transcript
Cache SQLite dans ~/.local/share/fractal-plus/stt_cache.db : table (event_id TEXT PRIMARY KEY, transcript TEXT, language TEXT, confidence TEXT, created_at TIMESTAMP)
Si le résultat est déjà en cache, ne pas relancer la transcription
La transcription est lancée dans un thread async (non-bloquant pour l'UI)
Gestion du mode automatique (SF-M1-02) : écoute les événements m.audio/m.voice via EventBus et lance la transcription si auto_transcribe = true

Notes techniques

Module SttExtension dans fractal-stt implémente Extension::on_sync_event() et filtre les m.room.message de type m.audio/m.voice
Voir specs §3.3 (ST-M1-04, ST-M1-06)

## Contexte Orchestrer le flux complet de transcription d'un message vocal Matrix : depuis le téléchargement du media jusqu'à l'affichage du résultat mis en cache. ## Critères d'acceptation - [ ] Pipeline en 5 étapes : (1) téléchargement via matrix-rust-sdk → `Vec<u8>`, (2) conversion opus/webm → WAV 16kHz mono via GStreamer, (3) envoi au moteur STT sélectionné, (4) mise en cache SQLite avec clé `event_id`, (5) retour du `Transcript` - [ ] Cache SQLite dans `~/.local/share/fractal-plus/stt_cache.db` : table `(event_id TEXT PRIMARY KEY, transcript TEXT, language TEXT, confidence TEXT, created_at TIMESTAMP)` - [ ] Si le résultat est déjà en cache, ne pas relancer la transcription - [ ] La transcription est lancée dans un thread async (non-bloquant pour l'UI) - [ ] Gestion du mode automatique (SF-M1-02) : écoute les événements `m.audio`/`m.voice` via EventBus et lance la transcription si `auto_transcribe = true` ## Notes techniques - Module `SttExtension` dans `fractal-stt` implémente `Extension::on_sync_event()` et filtre les `m.room.message` de type `m.audio`/`m.voice` - Voir specs §3.3 (ST-M1-04, ST-M1-06)

charles added the

priority:high

type:feature

module:M1-stt

labels

2026-04-06 08:52:22 +00:00

~~charles referenced this issue 2026-04-06 08:54:15 +00:00~~

[M1] TranscriptWidget : bouton "Transcrire", mode auto et indicateur de confiance #208

~~charles referenced this issue 2026-04-06 08:55:08 +00:00~~

[M1] Widget GTK TranscriptWidget — affichage inline sous AudioPlayer #232

charles referenced this issue

2026-04-06 08:55:25 +00:00