PROCÉDURES PRATIQUES D'ÉVALUATION SUBJECTIVE
Avant-propos
Table des matières
Section 1 Généralités
1.0 Généralités
1.1 Commentaires sur les méthodes subjectives utilisées en laboratoire
1.2 Utilisation des résultats des expériences
1.3 Recommandations UIT-T
1.4 Le besoin permanent de tests subjectifs
1.5 Tests en laboratoire ou tests sur le terrain
1.6 Méthodes recommandées
1.6.1 Tests de conversation
1.6.2 Tests d'écoute
1.6.3 Tests reposant sur des entretiens ou des enquêtes
1.6.4 Autres méthodes d'évaluation subjective
Section 2 Finalité des tests
2.0 Introduction
2.1 Qualification
2.2 Sélection
2.3 Caractérisation
2.4 Vérification
2.5 Recherche
2.6 Autres
Section 3 Plans d'expérience
3.0 Introduction
3.1 Etapes de la conception d'un test subjectif
3.2 Eléments et principes de conception
3.2.1 Sources de variabilité (langues, locuteurs, matériel vocal, sujets, etc.)
3.2.2 Facteurs - Effets aléatoires ou fixes
3.3 Types de plans de test
3.3.1 Plan factoriel
3.3.2 Plan d'expérience en blocs équilibrés
3.3.3 Plan en carré latin et plans connexes
3.3.4 Plan en carré gréco-latin
3.3.5 Plan emboîté
3.3.6 Autres plans
3.4 Echelles
3.4.1 Echelle nominale
3.4.2 Echelle ordinale
3.4.3 Echelle d'intervalle
3.4.4 Echelle de rapport
Section 4 Tests de conversation
4.0 Introduction
4.1 Installations de test
4.2 Plan de test
4.3 Tâche de conversation
4.4 Procédure de test
4.4.1 Choix des sujets
4.4.2 Critères d'évaluation subjective et échelles d'opinion
4.4.3 Exemple d'instructions à l'intention des sujets participant à un test de conversation
4.4.4 Collecte des données
4.4.5 Analyse des données et compte rendu des résultats
Section 5 Tests d'écoute
5.0 Introduction
5.1 Bases de données
5.1.1 Signaux vocaux
5.1.2 Base de données de bruit
5.1.3 Traitement concernant le bruit de fond et les signaux vocaux
5.2 Systèmes de référence
5.2.1 Système de référence intermédiaire
5.2.2 Système de référence intermédiaire modifié
5.2.3 Systèmes de filtrage uniforme
5.2.4 Autres systèmes de filtrage
5.3 Collecte des matériels source
5.3.1 Environnement d'enregistrement
5.3.2 Système d'enregistrement
5.3.3 Contrôle de la base de données vocales/musicales
5.3.4 Traitement des fichiers vocaux
5.3.5 Convention de dénomination des fichiers de signaux vocaux source/traités
5.4 Procédure relative aux tests d'écoute
5.4.1 Environnement d'écoute
5.4.2 Système d'écoute
5.4.3 Niveau d'écoute
5.4.4 Choix des sujets
5.4.5 Critères d'évaluation subjective et échelles d'opinion
5.4.6 Equivalence des échelles d'opinion entre les langues
5.4.7 Appréciation par catégories
5.4.8 Instructions à l'intention des sujets
Section 6 Analyse statistique et compte rendu des résultats
6.0 Introduction
6.1 Notions fondamentales de statistiques
6.1.1 Principes généraux de statistiques
6.1.2 Définitions
6.1.3 Application dans des tests subjectifs
6.2 Tests t de Student
6.2.1 Avantages et inconvénients
6.2.2 Définitions
6.3 Analyse de variance
6.3.1 Objet et hypothèses
6.3.2 Analyse
6.3.3 Comparaison de moyennes a posteriori
Section 7 Plan d'expérience pour des évaluations de codeurs vocaux (avec contrôle des sources d'erreur)
7.0 Introduction
7.1 Facteurs liés aux matériels source (procédures d'enregistrement, facteurs liés aux locuteurs)
7.2 Facteurs liés aux laboratoires
7.3 Facteurs liés à la langue
7.4 Facteurs liés aux auditeurs (sélection et échantillonnage, instructions et formation)
7.5 Facteurs liés au moment et à l'ordre, facteurs liés à l'équilibre (randomisation), contexte du test
7.6 Durée des séquences/sessions
7.7 Présentation des résultats
7.7.1 Outils d'analyse
7.7.2 Collecte des données
7.7.3 Laboratoire d'analyse globale
Section 8 Exemples de programmes de test/résultats pour des codeurs
Annexe A Principes de traitement (bibliothèque d'outils logiciels)
A.1 Domaine d'application
A.2 Historique
A.3 Motivation
A.4 Outils logiciels pour émuler des chaînes de transmission
A.5 Outils logiciels de traitement des références pour les tests subjectifs
A.6 Outil logiciel pour la spécification des codecs vocaux et audio UIT-T et l'évaluation objective de la qualité d...
A.7 Utilisation de la STL pour la mise en œuvre du traitement associé à un plan d'expérience
Annexe B Relation entre les méthodes d'évaluation subjective et d'évaluation objective
B.1 Recommandation UIT-T P.862
B.2 Comptabilisation des erreurs de classement pondérée sur le plan de la perception
Appendice 1 Procédure de remplacement des trames actives mal classées
Bibliographie