8
SY stème de M essagerie Unifiée PA role et TEX te Revue de Projet RNRT Mardi 10 décembre 2002

SYstème de Messagerie Unifiée PArole et TEXte Revue de Projet RNRT Mardi 10 décembre 2002

Embed Size (px)

Citation preview

Page 1: SYstème de Messagerie Unifiée PArole et TEXte Revue de Projet RNRT Mardi 10 décembre 2002

SYstème de Messagerie Unifiée PArole et TEXte

Revue de Projet RNRTMardi 10 décembre 2002

Page 2: SYstème de Messagerie Unifiée PArole et TEXte Revue de Projet RNRT Mardi 10 décembre 2002

Organisation du Projet

Sous-projet 1 :Transfert de technologie, Etude de marché, Analyse du

besoin et des contraintes d’implémentation Sous-projet 2 :

Amélioration de la technique de codage mono-locuteur Sous-projet 3 : 

Extension de la technique au codage indépendant du locuteur Sous-projet 4 :

Etude des contraintes pour l’intégration dans un produit Sous-projet 5 :

Démonstrateur PC, Démonstration Compression Livres Lus, Campagne d’évaluation

Page 3: SYstème de Messagerie Unifiée PArole et TEXte Revue de Projet RNRT Mardi 10 décembre 2002

Codage par indexation

Spectral analysis

LPCC coef

HMM Recognitionof RAU

Codebook of HMM modelsof recognition units RAU

Prosody analysis

Indices of RAU units

Coding ofprosodic

parameters

Coded prosodicparameters

Boundaries of segments

Indices of RAU units

Coder speech corpus

Speech input signal

Selection ofthe synthesis

unit: SAUSpeech segments

Indices of SAU units

Page 4: SYstème de Messagerie Unifiée PArole et TEXte Revue de Projet RNRT Mardi 10 décembre 2002

Décodage par synthèse

Indices of RAU units

Prosodicparameters

Synthetic speech output signal

Indices of SAU units

Selection ofthe synthesis

unit: SAU

Decoder speech corpus

Selectedsegment

HNManalysis

Prosodymodification

HNMconcatenative

synthesis

Page 5: SYstème de Messagerie Unifiée PArole et TEXte Revue de Projet RNRT Mardi 10 décembre 2002

Développements Réalisés

Améliorations du schéma de codage mono locuteur

Améliorations d’un système d’analyse – synthèse HNM

Synthèse à partir du texte par HNM Etudes de méthodes d’adaptation au locuteur

et de conversion de voix Etudes des contraintes d’intégration

Fonctionnement à horizon limité (Viterbi)Compression des unités de synthèse

Page 6: SYstème de Messagerie Unifiée PArole et TEXte Revue de Projet RNRT Mardi 10 décembre 2002

DémonstrateursCampagne d’évaluation

Compression de livres lus(Notre-Dame de Paris – V.Hugo, lu par A.Dussolier)

Démonstrateur transmission bas débit entre PC Evaluation par un laboratoire externe

(début 2003) Codeur bas débit 800 bits/sec (standard OTAN) Codeur bas débit 2400 bits/sec (dernier standard

OTAN) Système de référence Analyse/Synthèse HNM Codeur Sympatex (400 bits/sec – 600 bits/sec) Synthèse à partir du texte

Page 7: SYstème de Messagerie Unifiée PArole et TEXte Revue de Projet RNRT Mardi 10 décembre 2002

Difficultés & Retombées du Projet

Difficultés rencontrées Retrait d’Info Telecom : redéfinition du projet

(Démonstrateurs, Evaluation) Codage indépendant du locuteur, synergie

codage/synthèse: des améliorations et études supplémentaires sont nécessaires

Retombées ELAN Informatique : amélioration du système de synthèse à

partir du texte (HNM) THALES Communications : acquisition du savoir-faire pour

la compression à très bas débit Consortium: Publications, Conférences, Brevet(s) (codage

de la prosodie, brevet général en cours)

Page 8: SYstème de Messagerie Unifiée PArole et TEXte Revue de Projet RNRT Mardi 10 décembre 2002

Applications PotentiellesPerspectives

Applications potentielles Compressions de livres lus (ex :malvoyants), téléchargement Enseignement à distance Messagerie vocale bas débit sur réseau 3G (MMS audio) Transmission très bas débit (applications propriétaires)

Perspectives Améliorations du schéma de codage indépendant du locuteur Robustesse aux conditions d’acquisition (bruit environnant,

terminaux mobiles) Projet(s) de type pré-compétitif Thèse CIFRE (Thales / ESIEE)