Note d'opinion moyenne
Un article de Wikipédia, l'encyclopédie libre.
Mean Opinion Score (MOS en abréviation) ou Note d'opinion moyenne est une note donnée à un codec audio pour caractériser la qualité de la restitution sonore. La note peut varier entre 0 (très mauvais) et 5 (excellent, comparable à la version d'origine). Il est défini par l'UIT-T comme la norme « P.800 : Méthodes d'évaluation subjective de la qualité de transmission »
Sommaire |
[modifier] Pourquoi le MOS
Il existe un très grand nombre de codecs audio différents, basés sur des algorithmes de compression radicalement distincts. On distingue généralement trois familles :
- les codecs sans perte. Il sont très peu utilisés car ils ne permettent pas d'atteindre un bon taux de compression ;
- les codeurs de signal. Ces sont des algorithmes avec perte d'information qui ne font pas d'hypothèse particulière sur la nature du signal. Exemples: compression logarithmique (UIT-T G.711), ADPCM (UIT-T G.726), MPEG layer 3 ;
- les codeurs de voix, ou vocodeurs. Ils sont généralement basés sur synthétiseur de voix à dictionnaire fini. Le principe du codage consiste à trouver la meilleure combinaison d'entrées du dictionnaire pour minimiser l'erreur lors de la synthèse. Ce sont les codecs les plus utilisés en téléphonie. Exemples: UIT-T G.723.1, UIT-T G.729.
Ces algorithmes de compression étant très variés dans leur nature et par les résultats qu'ils produisent, un besoin a été ressenti pour pouvoir comparer leur qualités respectives. Avant l'introduction massive des vocodeurs, un simple calcul d'erreur quadratique entre le signal orginal et le signal codé-décodé donnait une mesure de la dégradation. Cepedant cette méthode a été remise en cause par deux facteurs :
- elle ne permet pas de tenir compte des effets psycho-acoustiques (par exemple l'effet de masque lorsque deux tonalités sont proches)
- un vocodeur peut être perçu de très bonne qualité alors que sa réponse temporelle est complètement différente du signal qu'il a codé. Dans ce cas l'erreur quadratique est grande alors que le vocodeur est de bonne qualité.
La méthode du score MOS a été envisagée de façon à prendre en compte ces facteurs et à évaluer la qualité perçue d'un codec.
[modifier] Méthodologie
Le principe de calcul du MOS est basé sur un sondage d'un échantillon supposé représentatif de la population des utilisateurs. Les personnes constituant l'échantillon sont invitées à écouter un signal (souvent de la voix), puis son équivalent codé-décodé. Après chaque écoute, l'auditeur donne une note sanctionnant la qualité qu'il a perçue. La moyenne des notes fournies par la population constitue le MOS. Le tableau ci-dessous montre les résultats obtenus par quelques codecs courants.
| Nom | Débit | Utilisation typique | Score MOS |
|---|---|---|---|
| UIT-T G.711 | 64 kbit/s | VoIP, RNIS | 4.1 |
| UIT-T G.729a | 8 kbit/s | VoIP | 3.9 |
| UIT-T G.726 | 32 kbit/s | VoIP, DECT | 3.85 |
| UIT-T G.723 | 5.3 kbit/s | VoIP | 3.6 |
| RPE-LTP | 9.6 kbit/s | GSM | 3.5 |
[modifier] Avantages de la méthode
Le score MOS quantifie la qualité effectivement perçue par une certaine population. En particulier il prend en compte les effets psycho-acoustiques. Dans le cas des vocodeurs le score MOS fait aussi apparaître les différences de qualité liées à la langue du locuteur et de l'auditeur. Un vocodeur peut être noté 3.9 en anglais et 1.9 en chinois mandarin. Enfin le MOS est un outil indispensable lors de la mise au point d'un nouveau type de codec. Les algorithmes complexes auxquels un codec moderne fait appel sont souvent assortis d'un certain nombre de paramètres qui le rendent plus ou moins propre à tel ou tel type d'application. Le choix de la valeur des paramètres est très difficile (parfois impossible) à faire de façon rationnelle. Dans ce cas le MOS vient au secours des chercheurs en apportant une réponse quantitative basée sur une expérience perceptuelle réelle.
[modifier] Inconvénients de la méthode
La mise en œuvre d'une évaluation MOS est chère en coût et en énergie. Elle suppose de convoquer un nombre relativement grand d'auditeurs, de mettre à leur disposition un équipement audio adapté, de les former à la bonne façon d'attribuer une note qui soit exploitable, et de collecter et consolider les résultats. Une autre difficulté est la nature subjective du résultat. Des corrections statistiques permettent de réduire l'aléa, mais pas de l'annuler. Cependant, l'expérience montre que lorsque plusieurs sessions sont effectuées dans les mêmes conditions, et avec des échantillons différents mais représentatifs de la même population, les résultats obtenus ne varient pas sensiblement. Le principal inconvénient du MOS réside dans le fait qu'il n'est pas standardisé. En dehors de toute norme méthodologique beaucoup de chiffres sont produits dans de mauvaises conditions expérimentales. Par exemple, on trouve des sites Internet proposant à l'utilisateur de participer au vote. Dans ce cas la note prend en compte la qualité du codec mais aussi celle de l'équipement audio de l'internaute et de son environnement acoustique au moment du test.
[modifier] Voir aussi
[modifier] Lien interne
- Perceptual Evaluation of Speech Quality : une méthode automatisée d'évaluation la qualité de la voix dans un système de télécommunications
