IEC 63478-3:2026

• Abstract:

  IEC 63478-3:2026 describes the measurement methods for users’ quality of experience (QoE) parameters on multimedia conferencing services.

• Status: Published
• Publication Date: 27-Aug-2026
• ICS: 33.160.60 - Multimedia systems and teleconferencing equipment
• Technical Committee: TC 100 - Audio, video and multimedia systems and equipment
• Drafting Committee: WG 11 - TC 100/WG 11
• Current Stage: PPUB - Publication issued
• Start Date: 28-Aug-2026
• Completion Date: 25-Sep-2026

Overview

IEC 63478-3:2026 – User’s quality of experience on multimedia conferencing services – Part 3: Measurement methods is an international standard developed by the International Electrotechnical Commission (IEC). This standard specifies the measurement methods for assessing users’ quality of experience (QoE) in multimedia conferencing services. As the shift towards virtual meetings accelerates globally, ensuring a consistent, high-quality user experience has become critical for businesses, educators, and technology providers alike. IEC 63478-3:2026 enables organizations to evaluate and improve their conferencing offerings by providing structured guidelines and parameters for measuring QoE from both technical and user-centric perspectives.

Key Topics

• Measurement Approaches

  • Subjective Methods: Involve direct user feedback through surveys, focus groups, interviews, user diaries, and user ratings on specific aspects such as audio and video quality, usability, and reliability.
  • Objective Methods: Use quantifiable technical metrics (e.g., latency, jitter, packet loss, and bit rate) and automated testing tools to assess the technical performance of conferencing services.
  • Hybrid Methods: Combine subjective user data and objective technical metrics, analyzed using statistical techniques, for a holistic assessment of QoE.

• QoE Measurement Models

  • Time-based Assessment Model: Measures QoE parameters before, during, and after the conference session to capture the full user journey, including initial expectations, in-use quality, and post-session satisfaction.
  • Common Survey Model: Uses structured rating scales (e.g., five- or seven-point ratings) allowing users to evaluate various service components like audio, video, and overall quality.
  • Honeycomb Model: Evaluates conferencing services across seven key QoE attributes: usefulness, usability, findability, credibility, desirability, accessibility, and value.

• Key QoE Parameters

  • Quality Video: Clarity, visual latency, and resolution adjustments to network conditions.
  • Quality Audio: Clarity, presence of noise, echo cancellation, dynamic range.
  • Synchronization: Timely alignment of audio and video streams.
  • Accessibility: Support for assistive technologies, captions, and cross-platform compatibility.
  • Participation and Collaboration: Group size handling, collaboration tools, and user engagement features.
  • Interoperability & Security: Integration with other platforms and assurance of secure communication.
  • User Interface/User Experience (UI/UX): Intuitive design, responsiveness, and user feedback mechanisms.

Applications

IEC 63478-3:2026 provides practical value for:

• Multimedia Conferencing Providers: Enables robust evaluation of services, helping providers identify weaknesses and enhance overall user satisfaction.
• Enterprises & Educational Institutions: Ensures virtual meeting and learning platforms meet high standards of usability and accessibility, improving productivity and inclusivity.
• Network and System Engineers: Offers guidelines for monitoring technical KPIs critical to seamless conferencing experiences.
• Product Managers & UX Designers: Provides frameworks for gathering actionable user feedback and aligning technical enhancements with user expectations.

By following the measurement guidelines in IEC 63478-3:2026, organizations can proactively monitor and improve the quality of virtual communication environments, leading to higher adoption, reduced user frustration, and competitive differentiation in a rapidly evolving digital landscape.

Related Standards

• IEC 63478-1 – User’s Quality of Experience on Multimedia Conferencing Services – Part 1: General Considerations
  Lays the foundational concepts and broad considerations for measuring QoE in conferencing services.
• IEC 63478-2 – User’s Quality of Experience on Multimedia Conferencing Services – Part 2: Requirements
  Details the specific requirements for achieving and maintaining high-quality user experience.
• ISO/IEC 9126 – Software Engineering – Product Quality
  Offers frameworks for software product quality that complement QoE-focused standards.
• ITU-T P.10/G.100 – Vocabulary for performance, quality of service and quality of experience
  Provides additional terminologies and definitions used in QoE and QoS discussions.

For organizations involved in digital communications, aligning with IEC 63478-3:2026 and related standards ensures adherence to international best practices for quality of experience in multimedia conferencing, leading to tangible benefits for both providers and users.

IEC 63478-3 ®
Edition 1.0 2026-08
INTERNATIONAL
STANDARD
User’s quality of experience on multimedia conferencing services -
Part 3: Measurement methods
ICS 33.160.60  ISBN 978-2-8327-1454-6

All rights reserved. Unless otherwise specified, no part of this publication may be reproduced or utilized in any form or
by any means, electronic or mechanical, including photocopying and microfilm, without permission in writing from either
IEC or IEC's member National Committee in the country of the requester. If you have any questions about IEC copyright
or have an enquiry about obtaining additional rights to this publication, please contact the address below or your local
IEC member National Committee for further information.

IEC Secretariat Tel.: [phone]
3, rue de Varembé [e-mail]
CH-1211 Geneva 20 www.iec.ch
Switzerland
About the IEC
The International Electrotechnical Commission (IEC) is the leading global organization that prepares and publishes
International Standards for all electrical, electronic and related technologies.

About IEC publications
The technical content of IEC publications is kept under constant review by the IEC. Please make sure that you have the
latest edition, a corrigendum or an amendment might have been published.

IEC publications search - IEC Products & Services Portal - products.iec.ch
webstore.iec.ch/advsearchform Discover our powerful search engine and read freely all the
The advanced search enables to find IEC publications by a publications previews, graphical symbols and the glossary.
variety of criteria (reference number, text, technical With a subscription you will always have access to up to date
committee, …). It also gives information on projects, content tailored to your needs.
replaced and withdrawn publications.
Electropedia - www.electropedia.org
The world's leading online dictionary on electrotechnology,
IEC Just Published - webstore.iec.ch/justpublished
Stay up to date on all new IEC publications. Just Published containing more than 22 500 terminological entries in English
details all new publications released. Available online and and French, with equivalent terms in 25 additional languages.
once a month by email. Also known as the International Electrotechnical Vocabulary
(IEV) online.
IEC Customer Service Centre - webstore.iec.ch/csc
If you wish to give us your feedback on this publication or
need further assistance, please contact the Customer
Service Centre: [e-mail].
CONTENTS
FOREWORD . 3
INTRODUCTION . 5
1 Scope . 6
2 Normative references . 6
3 Terms, definitions and abbreviated terms . 6
3.1 Terms and definitions. 6
3.2 Abbreviated terms . 6
4 Design approach for QoE measurement . 7
4.1 Subjective measurement . 7
4.2 Objective measurement . 7
4.3 Hybrid measurement . 8
5 QoE measurement model . 8
5.1 Timeline rating model. 8
5.2 Common survey model . 9
5.3 Honeycomb model . 9
6 Measurement of QoE parameters . 11
6.1 General . 11
6.2 Video quality . 12
6.3 Audio quality . 12
6.4 Synchronization . 13
6.5 Accessibility . 13
6.6 Interoperability . 14
6.7 Participation . 14
6.8 Openness . 14
6.9 UI/UX . 15
7 Functional operations for QoE measurement . 15
7.1 General . 15
7.2 QoE measurement operations . 17
7.3 Initialization . 19
7.4 Monitoring . 19
7.5 Evaluation . 19
7.6 Authentication . 19
7.7 Data management . 19
8 Presentation of QoE measurement results . 20
8.1 General . 20
8.2 Quantitative representation using tables and charts . 20
8.3 Qualitative representation using report-based analysis . 20
8.4 QoE model-based representation . 21
Annex A (informative) Example of QoE measurement of multimedia conferencing
services . 22
A.1 General . 22
A.2 Measurement methods . 22
A.3 Test execution . 23
A.4 Results and recommendations . 23
A.5 Conclusion . 24
Bibliography . 25
Figure 1 – Timeline rating model . 8
Figure 2 – Simple survey example of common survey model . 9
Figure 3 – Honeycomb model . 10
Figure 4 – QoE measurement service functional blocks . 16
Figure 5 – Interworking between functional entities for QoE measurement . 17
Figure 6 – Operational flows for QoE measurement . 18

Table 1 – Abbreviated terms . 6
Table 2 – Attributes of honeycomb model . 9
Table 3 – List of QoE parameters . 11
Table A.1 – QoE factors and measurement methods . 22

INTERNATIONAL ELECTROTECHNICAL COMMISSION
____________
User's quality of experience on multimedia conferencing services -
Part 3: Measurement methods
FOREWORD
1) The International Electrotechnical Commission (IEC) is a worldwide organization for standardization comprising
all national electrotechnical committees (IEC National Committees). The object of IEC is to promote international
co-operation on all questions concerning standardization in the electrical and electronic fields. To this end and
in addition to other activities, IEC publishes International Standards, Technical Specifications, Technical Reports,
Publicly Available Specifications (PAS) and Guides (hereafter referred to as “IEC Publication(s)”). Their
preparation is entrusted to technical committees; any IEC National Committee interested in the subject dealt with
may participate in this preparatory work. International, governmental and non-governmental organizations liaising
with the IEC also participate in this preparation. IEC collaborates closely with the International Organization for
Standardization (ISO) in accordance with conditions determined by agreement between the two organizations.
2) The formal decisions or agreements of IEC on technical matters express, as nearly as possible, an international
consensus of opinion on the relevant subjects since each technical committee has representation from all
interested IEC National Committees.
3) IEC Publications have the form of recommendations for international use and are accepted by IEC National
Committees in that sense. While all reasonable efforts are made to ensure that the technical content of IEC
Publications is accurate, IEC cannot be held responsible for the way in which they are used or for any
misinterpretation by any end user.
4) In order to promote international uniformity, IEC National Committees undertake to apply IEC Publications
transparently to the maximum extent possible in their national and regional publications. Any divergence between
any IEC Publication and the corresponding national or regional publication shall be clearly indicated in the latter.
5) IEC itself does not provide any attestation of conformity. Independent certification bodies provide conformity
assessment services and, in some areas, access to IEC marks of conformity. IEC is not responsible for any
services carried out by independent certification bodies.
6) All users should ensure that they have the latest edition of this publication.
7) No liability shall attach to IEC or its directors, employees, servants or agents including individual experts and
members of its technical committees and IEC National Committees for any personal injury, property damage or
other damage of any nature whatsoever, whether direct or indirect, or for costs (including legal fees) and
expenses arising out of the publication, use of, or reliance upon, this IEC Publication or any other IEC
Publications.
8) Attention is drawn to the Normative references cited in this publication. Use of the referenced publications is
indispensable for the correct application of this publication.
9) IEC draws attention to the possibility that the implementation of this document may involve the use of (a)
patent(s). IEC takes no position concerning the evidence, validity or applicability of any claimed patent rights in
respect thereof. As of the date of publication of this document, IEC had not received notice of (a) patent(s), which
may be required to implement this document. However, implementers are cautioned that this may not represent
the latest information, which may be obtained from the patent database available at https://patents.iec.ch. IEC
shall not be held responsible for identifying any or all such patent rights.
IEC 63478-3 has been prepared by IEC technical committee 100: Audio, video and multimedia
systems and equipment. It is an International Standard.
The text of this International Standard is based on the following documents:
Draft Report on voting
100/4345/CDV 100/4396/RVC
Full information on the voting for its approval can be found in the report on voting indicated in
the above table.
The language used for the development of this International Standard is English.
This document was drafted in accordance with ISO/IEC Directives, Part 2, and developed in
accordance with ISO/IEC Directives, Part 1 and ISO/IEC Directives, IEC Supplement, available
at www.iec.ch/members_experts/refdocs. The main document types developed by IEC are
described in greater detail at www.iec.ch/publications.
A list of all parts in the IEC 63478 series, published under the general title User’s quality of
experience on multimedia conferencing services, can be found on the IEC website.
The committee has decided that the contents of this document will remain unchanged until the
stability date indicated on the IEC website under webstore.iec.ch in the data related to the
specific document. At this date, the document will be
– reconfirmed,
– withdrawn, or
– revised.
INTRODUCTION
With the global COVID-19 pandemic, meetings for business and education purposes have
shifted from face-to-face to virtual. Consequently, a range of multimedia conferencing services
has been developed, enabling users to choose and enjoy conferencing services based on
personal preferences. To ensure optimal user experience, it is essential to measure the quality
of experience (QoE) for multimedia conferencing services. However, there is currently a lack of
standardized methods for measuring a user's QoE in this context. Thus, it is increasingly
important to provide guidelines for measuring and evaluating a user's QoE for multimedia
conferencing services.
Traditionally, quality of service (QoS) has been measured for network data communication,
represented by objective index values like delay, throughput, and jitter. In contrast, QoE
represents a user's level of satisfaction with a specific service and reflects human emotional
quality. As such, QoE is subject to overall service performance from the user's perspective. In
the case of multimedia conferencing services, measuring QoE is challenging due to varying
user preferences/requirements and service/application characteristics. Therefore, a unified
framework is necessary to measure and evaluate a user's QoE for multimedia conferencing
services.
This document aims to provide guidelines for enhancing a user's QoE for multimedia
conferencing services. The IEC 63478 series specifies general considerations and
requirements to enhance a user's QoE and measurement methods for associated QoE
parameters.
The IEC 63478 series consists of the following parts:
– Part 1: General;
– Part 2: Requirements; and
– Part 3: Measurement methods.
IEC 63478-1 (Technical Report) describes general considerations to measure users’ QoE.
IEC 63478-2 (International Standard) describes the requirements to be considered to measure
users’ QoE.
IEC 63478-3 (International Standard) describes the measurement methods for QoE parameters.

1 Scope
This part of IEC 63478 describes the measurement methods for users’ quality of experience
(QoE) parameters on multimedia conferencing services.
2 Normative references
The following documents are referred to in the text in such a way that some or all of their content
constitutes requirements of this document. For dated references, only the edition cited applies.
For undated references, the latest edition of the referenced document (including any
amendments) applies.
IEC 63478-2, User's quality of experience (QoE) on multimedia conferencing services - Part 2:
Requirements
3 Terms, definitions and abbreviated terms
For the purposes of this document, the following terms and definitions apply.
ISO and IEC maintain terminology databases for use in standardization at the following
addresses:
– IEC Electropedia: available at https://www.electropedia.org/
– ISO Online browsing platform: available at https://www.iso.org/obp
3.1 Terms and definitions
No terms and definitions are listed in this document.
3.2 Abbreviated terms
The abbreviated terms are given in Table 1.
Table 1 – Abbreviated terms
Abbreviated term Full term
API Application programming interface
MCC Multimedia conferencing client
MCS Multimedia conferencing server
QMA QoE measurement agent
QMM QoE measurement manager
QoE Quality of Experience
SDK Software development kit
UI/UX User interface / User eXperience

4 Design approach for QoE measurement
4.1 Subjective measurement
Subjective measurement approach to measure QoE in multimedia conferencing services
involves obtaining feedback directly from users about their perception of the quality of the
conference. Here are some of the commonly used subjective approaches to measure QoE:
– Surveys
Surveys are a common subjective approach to measure QoE. Participants are asked to rate
their overall experience of the multimedia conferencing service, including audio and video
quality, ease of use, and reliability.
– Focus groups
Focus groups are another subjective approach that involves gathering a group of users to
discuss their experiences with the multimedia conferencing service. Participants share their
opinions, feedback, and suggestions about the service.
– Interviews
Interviews with individual users provide in-depth insights into their experience with the
multimedia conferencing service. Participants provide feedback on specific aspects of the
service, such as audio quality, video quality, or user interface.
– User diaries
User diaries involve asking users to keep a record of their experiences with the multimedia
conferencing service over a period of time. Participants record their perceptions of the
service, any issues they encounter, and suggestions for improvement.
– User ratings
User ratings can be obtained by asking users to rate specific aspects of the multimedia
conferencing service, such as audio and video quality, ease of use, and reliability. These
ratings can be used to calculate an overall QoE score.
4.2 Objective measurement
The objective measurement approach is a QoE measurement method that uses technical
parameters and measurements to evaluate the quality of multimedia services. This approach
focuses on quantifiable metrics such as delay, jitter, packet loss, and bitrate to assess the
quality of the service.
Here are some of the commonly used objective approaches to measure QoE:
– Objective assessment
This approach involves collecting objective data about the service, such as network latency,
packet loss, and other technical parameters. This data is then analysed to determine the
quality of the service.
– QoE metrics
These are standardized metrics used to measure QoE, such as mean opinion score (MOS),
which is a measure of the overall quality of the service based on user ratings.
– Behavioural analysis
This approach involves analysing user behaviours to determine the quality of the service.
For example, user engagement and participation in a meeting can be used as indicators of
the quality of the service.
– Automated testing
This approach involves using automated tools to simulate user behaviour and measure the
QoE of the service. This can be useful for testing the service under different network
conditions and user scenarios.
4.3 Hybrid measurement
The hybrid measurement approach combines both subjective and objective measurement
approaches to evaluate the QoE of multimedia services. This approach is often used to provide
a more accurate and comprehensive evaluation of the QoE, as it combines the benefits of both
approaches. The hybrid approach involves collecting both objective and subjective data, then
using statistical methods to analyze and compare the data to arrive at a QoE score.
5 QoE measurement model
5.1 Timeline rating model
The timeline rating model is a QoE measurement model that involves measuring QoE parameter
values at different stages of multimedia conferencing, namely before, during, and after the
conference. It is essential to determine the appropriate timing for each QoE parameter to be
measured. Factors such as user age, device type, purpose of use, and communication
environment are crucial for QoE measurement before the conference. These factors are
gathered before the QoE parameter aggregation service begins and the user starts using the
service. During the conference, video quality, audio quality, and network status can be
measured. After the conference, the user's overall satisfaction level or opinion can be measured.
Figure 1 illustrates the timeline rating model.

Figure 1 – Timeline rating model
5.2 Common survey model
In the common survey model, the MCS measures the management information to provide
multimedia conferencing services to the MCC. For example, these include service type, the
number of users and traffic.
On the other hand, the MCC uses the common survey model which is a subjective approach
used to measure the quality of multimedia conferencing services. In this model, users are asked
to rate the quality of the service on a fixed scale, such as a five-point or seven-point scale.
Users are usually presented with a stimulus, such as a video or audio clip, and are asked to
rate the quality of the stimulus based on a specific attribute, such as video quality, audio quality,
or overall quality. Figure 2 shows a simple survey example of the common survey model.

Figure 2 – Simple survey example of common survey model
5.3 Honeycomb model
The honeycomb model can be used to evaluate the QoE of a multimedia conferencing service
by examining how well it satisfies the following seven attributes as described in Table 2.
Table 2 – Attributes of honeycomb model
Attribute Description
Useful The extent to which the service is satisfactory in terms of service purposes
Usable The extent to which the service is usable
Findable How easily users can find the information they want in the service duration
Credible The extent to which the multimedia service can be trusted as a stable service
Desirable The extent to which the service is attractive and appealing to users
Accessible How well the service accommodates users with different needs
Valuable The extent to which the service provides benefits and value to users

By measuring the attributes in Table 2 using various techniques such as surveys, usability
testing, user feedback, and analytics, service providers can evaluate the QoE of their
multimedia conferencing service and identify areas for improvement. Figure 3 shows the
honeycomb model.
Figure 3 – Honeycomb model
– Useful
The usefulness of the multimedia conferencing service can be measured by evaluating how
well it meets the needs of the users. This can be done through user surveys or by analysing
user behaviours and interaction with the service.
– Usable
The usability of the service can be measured by evaluating how easy it is for users to
navigate and perform tasks within the service. This can be done through usability testing
and user feedback.
– Findable
The findability of the service can be measured by evaluating how easily users can find what
they are looking for within the service. This can be done through search engine optimization
and user testing.
– Credible
The credibility of the service can be measured by evaluating the accuracy and
trustworthiness of the information and content provided by the service. This can be done
through user feedback and third-party reviews.
– Desirable
The desirability of the service can be measured by evaluating how attractive and appealing
it is to users. This can be done through user surveys and aesthetic evaluations.
– Accessible
The accessibility of the service can be measured by evaluating how well it accommodates
users with disabilities and different needs. This can be done through accessibility testing
and user feedback.
– Valuable
The value of the service can be measured by evaluating the benefits that it provides to users.
This can be done through user surveys and analysis of user behaviours.
6 Measurement of QoE parameters
6.1 General
For QoE measurement, the following QoE parameters are considered in Table 3.
Table 3 – List of QoE parameters
QoE parameter QoE factor Type Mandatory/Optional
Visual clarity Hybrid Mandatory
Video quality
Latency Objective Mandatory
Clarity Subjective Mandatory
Noise Subjective Mandatory
Audio quality Latency Objective Mandatory
Dynamic range Objective
Echo cancellation Objective
Accuracy Hybrid Mandatory
Synchronization Adaptive Objective
Consistency Objective
Support for assistive technologies Objective Mandatory
Accessibility Compatibility with assistive devices Objective
Captioning and transcription Objective Mandatory
Cross-platform compatibility Objective Mandatory
Interoperability Integration with other services Objective Mandatory
Security Objective Mandatory
User group size Objective Mandatory
Participation
Collaboration tools Objective Mandatory
Transparency Objective
Openness
Open API/SDK Objective
Intuitive and user-friendly design Subjective Mandatory
Consistency across platforms Hybrid
UI/UX
Customizability Objective
Feedback and notifications Objective Mandatory

To measure the user QoE of a multimedia conferencing service, various QoE parameters are
considered, which are described in detail in IEC 63478-2. An additional consideration for
measurement is Type, which refers to the subjective and/or objective approach to measuring a
specific QoE factor. Subjective measurements are based on user feedback, while objective
measurements are based on quantitative measurements of multimedia conferencing services
or whether specific features are provided. An example of QoE measurement is given in Annex A.
6.2 Video quality
Video quality is a critical fa
...

IEC 63478-3 ®
Edition 1.0 2026-08
NORME
INTERNATIONALE
Qualité de l'expérience de l'utilisateur sur les services de conférence multimédia -
Partie 3: Méthodes de mesure
ICS 33.160.60  ISBN 978-2-8327-1454-6

Droits de reproduction réservés. Sauf indication contraire, aucune partie de cette publication ne peut être reproduite ni
utilisée sous quelque forme que ce soit et par aucun procédé, électronique ou mécanique, y compris la photocopie et
les microfilms, sans l'accord écrit de l'IEC ou du Comité national de l'IEC du pays du demandeur. Si vous avez des
questions sur le copyright de l'IEC ou si vous désirez obtenir des droits supplémentaires sur cette publication, utilisez
les coordonnées ci-après ou contactez le Comité national de l'IEC de votre pays de résidence.

IEC Secretariat Tel.: [phone]
3, rue de Varembé [e-mail]
CH-1211 Geneva 20 www.iec.ch
Switzerland
A propos de l'IEC
La Commission Electrotechnique Internationale (IEC) est la première organisation mondiale qui élabore et publie des
Normes internationales pour tout ce qui a trait à l'électricité, à l'électronique et aux technologies apparentées.

A propos des publications IEC
Le contenu technique des publications IEC est constamment revu. Veuillez vous assurer que vous possédez l’édition la
plus récente, un corrigendum ou amendement peut avoir été publié.

Recherche de publications IEC -  IEC Products & Services Portal - products.iec.ch
webstore.iec.ch/advsearchform Découvrez notre puissant moteur de recherche et consultez
La recherche avancée permet de trouver des publications gratuitement tous les aperçus des publications, symboles
IEC en utilisant différents critères (numéro de référence, graphiques et le glossaire. Avec un abonnement, vous aurez
texte, comité d’études, …). Elle donne aussi des toujours accès à un contenu à jour adapté à vos besoins.
informations sur les projets et les publications remplacées
ou retirées. Electropedia - www.electropedia.org
Le premier dictionnaire d'électrotechnologie en ligne au
IEC Just Published - webstore.iec.ch/justpublished monde, avec plus de 22 500 articles terminologiques en
Restez informé sur les nouvelles publications IEC. Just anglais et en français, ainsi que les termes équivalents
dans 25 langues additionnelles. Egalement appelé
Published détaille les nouvelles publications parues.
Disponible en ligne et une fois par mois par email. Vocabulaire Electrotechnique International (IEV) en ligne.

Service Clients - webstore.iec.ch/csc
Si vous désirez nous donner des commentaires sur cette
publication ou si vous avez des questions contactez-
nous: [e-mail].
SOMMAIRE
AVANT-PROPOS . 3
INTRODUCTION . 5
1 Domaine d'application . 6
2 Références normatives . 6
3 Termes, définitions et abréviations . 6
3.1 Termes et définitions . 6
3.2 Abréviations . 6
4 Approche de conception pour le mesurage de la QoE . 7
4.1 Mesurage subjectif . 7
4.2 Mesurage objectif . 7
4.3 Mesurage hybride . 8
5 Modèle de mesure de la QoE . 8
5.1 Modèle d'évaluation dans le temps . 8
5.2 Modèle d'enquête commun . 9
5.3 Modèle en nid d'abeille . 9
6 Mesurage des paramètres de QoE. 11
6.1 Généralités . 11
6.2 Qualité vidéo . 12
6.3 Qualité audio . 13
6.4 Synchronisation . 13
6.5 Accessibilité . 14
6.6 Interopérabilité . 14
6.7 Participation . 15
6.8 Ouverture . 15
6.9 UI/UX . 16
7 Opérations fonctionnelles pour le mesurage de la QoE . 16
7.1 Généralités . 16
7.2 Opérations de mesurage de la QoE . 18
7.3 Initialisation . 20
7.4 Surveillance . 20
7.5 Évaluation . 20
7.6 Authentification . 21
7.7 Gestion des données . 21
8 Présentation des résultats de mesure de la QoE . 21
8.1 Généralités . 21
8.2 Représentation quantitative à l'aide de tableaux et de graphiques . 21
8.3 Représentation qualitative à l’aide d’une analyse basée sur un rapport . 22
8.4 Représentation basée sur un modèle de QoE . 22
Annexe A (informative) Exemple de mesurage de la QoE des services de conférence
multimédia . 23
A.1 Généralités . 23
A.2 Méthodes de mesure . 23
A.3 Exécution de l'essai . 24
A.4 Résultats et recommandations . 24
A.5 Conclusion . 25
Bibliographie . 26
Figure 1 – Modèle d'évaluation dans le temps . 8
Figure 2 – Exemple simple de modèle d'enquête commun . 9
Figure 3 – Modèle en nid d'abeille . 10
Figure 4 – Blocs fonctionnels de service de mesurage de la QoE . 17
Figure 5 – Interfonctionnement entre entités fonctionnelles pour le mesurage
de la QoE . 18
Figure 6 – Flux opérationnels pour le mesurage de la QoE . 20

Tableau 1 – Abréviations . 6
Tableau 2 – Attributs du modèle en nid d'abeille . 10
Tableau 3 – Liste des paramètres de QoE . 11
Tableau A.1 – Facteurs de QoE et méthodes de mesure . 23

COMMISSION ÉLECTROTECHNIQUE INTERNATIONALE
____________
Qualité de l'expérience de l'utilisateur
sur les services de conférence multimédia -
Partie 3: Méthodes de mesure
AVANT-PROPOS
1) La Commission électrotechnique internationale (IEC) est une organisation mondiale de normalisation composée
de tous les comités électrotechniques nationaux (Comités nationaux IEC). L'IEC a pour objet de promouvoir la
coopération internationale sur toutes les questions de normalisation dans les domaines électrique et électronique.
À cet effet, l'IEC, entre autres activités, publie des Normes internationales, des Spécifications techniques, des
Rapports techniques, des Spécifications accessibles au public (PAS) et des Guides (ci-après dénommés
«Publication(s) IEC»)”). Leur préparation est confiée à des comités techniques; tout comité national de l'IEC
intéressé par le sujet traité peut participer à ces travaux préparatoires. Les organisations internationales,
gouvernementales et non gouvernementales en liaison avec l'IEC participent également à cette préparation.
L'IEC collabore étroitement avec l'Organisation internationale de normalisation (ISO) dans le respect des
conditions déterminées par accord entre les deux organisations.
2) Les décisions ou accords officiels de l'IEC sur les questions techniques expriment, dans la mesure du possible,
un consensus international sur les questions pertinentes, étant donné que chaque comité technique est
représenté par tous les comités nationaux de l'IEC intéressés.
3) Les Publications de l'IEC se présentent sous la forme de recommandations internationales et sont acceptées par
les Comités nationaux de l'IEC en ce sens. Bien que tous les efforts raisonnables soient faits pour s'assurer que
le contenu technique des Publications de l'IEC est exact, l'IEC ne peut être tenue pour responsable de la manière
dont elles sont utilisées ou de toute mauvaise interprétation par un utilisateur final.
4) Afin de promouvoir l'uniformité internationale, les Comités nationaux de l'IEC s'engagent à appliquer les
Publications de l'IEC de manière transparente, dans toute la mesure du possible, dans leurs publications
nationales et régionales. Toute divergence entre une publication IEC et la publication nationale ou régionale
correspondante doit être clairement indiquée dans cette dernière.
5) L'IEC elle-même ne fournit aucune attestation de conformité. Des organismes de certification indépendants
fournissent des services d'évaluation de la conformité et, dans certains domaines, donnent accès aux marques
de conformité IEC. L'IEC n'est pas responsable des services fournis par des organismes de certification
indépendants.
6) Il convient que tous les utilisateurs s'assurent d'avoir la dernière édition de cette publication.
7) Aucune responsabilité ne doit être imputée à l’IEC ou à ses administrateurs, employés, préposés ou mandataires,
y compris les experts individuels et les membres de ses comités techniques et des Comités nationaux de l’IEC,
pour tout préjudice corporel, dommage matériel ou autre dommage de quelque nature que ce soit, direct ou
indirect, ou pour les coûts (y compris les frais de justice) et les dépenses découlant de la publication, de
l’utilisation ou de la confiance accordée à la présente Publication de l’IEC ou à toute autre Publication de l’IEC.
8) L'attention est attirée sur les références normatives citées dans la présente publication. L'utilisation des
publications référencées est indispensable à l'application correcte de la présente publication.
9) L'IEC attire l'attention sur le fait que la mise en œuvre du présent document peut impliquer l'utilisation d'un ou
de plusieurs brevets. L'IEC ne prend pas position quant à la preuve, à la validité ou à l'applicabilité des droits de
propriété revendiqués à cet égard. À la date de publication du présent document, l'IEC n'avait pas reçu
notification d'un ou de plusieurs brevets qui pourraient être nécessaires à sa mise en application. Toutefois, les
responsables de la mise en œuvre sont avertis que cela peut ne pas représenter les informations les plus
récentes, qui peuvent être obtenues à partir de la base de données sur les brevets disponible à l'adresse
https://patents.iec.ch. L'IEC ne saurait être tenue pour responsable d'avoir identifié tout ou partie de tels droits
de propriété.
L'IEC 63478-3 a été établie par le comité d'études 100 de l'IEC: Systèmes et équipements audio,
vidéo et services de données. Il s'agit d'une Norme internationale.
Le texte de la présente Norme internationale est issu des documents suivants:
Projet Rapport de vote
100/4345/CDV 100/4396/RVC
Le rapport de vote indiqué dans le tableau ci-dessus donne toute information sur le vote ayant
abouti à son approbation.
La langue utilisée pour l'élaboration de la présente Norme internationale est l'anglais.
Le présent document a été rédigé conformément aux directives ISO/IEC, Partie 2, et élaboré
conformément aux directives ISO/IEC, Partie 1 et aux directives ISO/IEC, Supplément IEC,
disponibles à l’adresse www.iec.ch/members_experts/refdocs. Les principaux types de
documents développés par l'IEC sont décrits plus en détail à l'adresse www.iec.ch/publications.
Une liste de toutes les parties de la série IEC 63478, publiées sous le titre général Qualité de
l'expérience de l'utilisateur sur les services de conférence multimédia, peut être consultée sur
le site web de l'IEC.
Le comité a décidé que le contenu de ce document ne sera pas modifié avant la date de stabilité
indiquée sur le site web de l’IEC sous webstore.iec.ch dans les données relatives au document
spécifique. À cette date, le document sera
– reconduit,
– retiré, ou
– révisé.
INTRODUCTION
Avec la pandémie mondiale de COVID-19, les réunions à des fins professionnelles et
éducatives sont passées du face-à-face au virtuel. Par conséquent, une gamme de services de
conférence multimédia a été développée, permettant aux utilisateurs de choisir et de profiter
des services de conférence en fonction de leurs préférences personnelles. Pour assurer une
expérience utilisateur optimale, il est essentiel de mesurer la qualité de l'expérience (QoE) des
services de conférence multimédia. Cependant, il manque actuellement des méthodes
normalisées pour mesurer la QoE d’un utilisateur dans ce contexte. Il devient donc de plus en
plus urgent de fournir des lignes directrices pour mesurer et évaluer la QoE d'un utilisateur pour
les services de conférence multimédia.
Traditionnellement, la qualité de service (QoS) est mesurée pour la communication de données
sur le réseau, représentée par des valeurs d'indice objectives telles que le retard, le débit et la
gigue. En revanche, la QoE représente le niveau de satisfaction d'un utilisateur vis-à-vis d'un
service spécifique et reflète le ressenti des personnes. En tant que telle, la QoE dépend de la
performance globale du service du point de vue de l'utilisateur. Dans le cas des services de
conférence multimédia, le mesurage de la QoE est difficile en raison des préférences/exigences
des utilisateurs et des caractéristiques du service/de l'application. Par conséquent, un cadre
unifié est nécessaire pour mesurer et évaluer la QoE d'un utilisateur pour les services de
conférence multimédia.
Le présent document vise à fournir des lignes directrices pour améliorer la QoE d'un utilisateur
pour les services de conférence multimédia. La série IEC 63478 spécifie les considérations
générales et les exigences pour améliorer la QoE d'un utilisateur et les méthodes de mesure
pour les paramètres de QoE associés.
La série IEC 63478 comprend les parties suivantes:
– Partie 1: Généralités;
– Partie 2: Exigences; et
– Partie 3: Méthodes de mesure.
L’IEC 63478-1 (Rapport technique) décrit les considérations générales pour mesurer la QoE
des utilisateurs.
L’IEC 63478-2 (Norme internationale) décrit les exigences à prendre en compte pour mesurer
la QoE des utilisateurs.
L’IEC 63478-3 (Norme internationale) décrit les méthodes de mesure des paramètres de QoE.

1 Domaine d'application
La présente partie de l'IEC 63478 décrit les méthodes de mesure des paramètres de qualité de
l'expérience (QoE) des utilisateurs sur les services de conférence multimédia.
2 Références normatives
Les documents suivants sont cités dans le texte de sorte qu'ils constituent, pour tout ou partie
de leur contenu, des exigences du présent document. Pour les références datées, seule
l’édition citée s’applique. Pour les références non datées, la dernière édition du document de
référence s'applique (y compris les éventuels amendements).
IEC 63478-2, Qualité de l'expérience de l'utilisateur pour les services de conférence
multimédia - Partie 2: Exigences
3 Termes, définitions et abréviations
Pour les besoins du présent document, les termes et définitions suivants s'appliquent.
L'ISO et l'IEC tiennent à jour des bases de données terminologiques destinées à être utilisées
en normalisation aux adresses suivantes:
– IEC Electropedia: disponible à l'adresse https://www.electropedia.org/
– ISO Online browsing platform: disponible à l'adresse https://www.iso.org/obp
3.1 Termes et définitions
Aucun terme n'est défini dans le présent document.
3.2 Abréviations
Les abréviations sont données dans le Tableau 1.
Tableau 1 – Abréviations
Abréviation
Terme complet
API Interface de programmation d'application
MCC Client de conférence multimédia
MCS Serveur de conférence multimédia
QMA Agent de mesure de la QoE
QMM Gestionnaire de mesures QoE
QoE Qualité de l'expérience
SDK Kit de développement logiciel
UI/UX Interface utilisateur / Expérience utilisateur

4 Approche de conception pour le mesurage de la QoE
4.1 Mesurage subjectif
L’approche de mesurage subjectif pour mesurer la QoE dans les services de conférence
multimédia implique d’obtenir un retour d’information direct des utilisateurs sur leur perception
de la qualité de la conférence. Voici quelques-unes des approches subjectives couramment
utilisées pour mesurer la QoE:
– Enquêtes
Les enquêtes sont une approche subjective courante pour mesurer la QoE. Les participants
sont invités à évaluer leur expérience globale du service de conférence multimédia, y
compris la qualité audio et vidéo, la facilité d'utilisation et la fiabilité.
– Groupes de discussion
Les groupes de discussion sont une autre approche subjective qui consiste à réunir un
groupe d'utilisateurs pour discuter de leurs expériences avec le service de conférence
multimédia. Les participants partagent leurs opinions, retours d'information et suggestions
sur le service.
– Entretiens
Les entretiens avec les utilisateurs individuels fournissent des informations approfondies
sur leur expérience avec le service de conférence multimédia. Les participants fournissent
un retour d'information sur des aspects spécifiques du service, tels que la qualité audio, la
qualité vidéo ou l'interface utilisateur.
– Journaux de l'utilisateur
Les journaux d'utilisateurs consistent à demander aux utilisateurs de conserver un
enregistrement de leurs expériences avec le service de conférence multimédia sur une
période de temps. Les participants enregistrent leurs perceptions du service, les problèmes
qu'ils rencontrent et les suggestions d'amélioration.
– Évaluations de l'utilisateur
Les évaluations des utilisateurs peuvent être obtenues en demandant aux utilisateurs
d'évaluer des aspects spécifiques du service de conférence multimédia, tels que la qualité
audio et vidéo, la facilité d'utilisation et la fiabilité. Ces évaluations peuvent être utilisées
pour calculer un score QoE global.
4.2 Mesurage objectif
L’approche de mesurage objectif est une méthode de mesure de la QoE qui utilise des
paramètres techniques et des mesurages pour évaluer la qualité des services multimédias.
Cette approche se concentre sur des mesures quantifiables telles que le retard, la gigue, la
perte de paquets et le débit binaire pour évaluer la qualité du service.
Voici quelques-unes des approches objectives couramment utilisées pour mesurer la QoE:
– Évaluation objective
Cette approche implique la collecte de données objectives sur le service, telles que le temps
d'attente du réseau, la perte de paquets et d'autres paramètres techniques. Ces données
sont ensuite analysées pour déterminer la qualité du service.
– Métriques de QoE
Il s’agit de mesures normalisées utilisées pour mesurer la QoE, telles que le score d’opinion
moyen (MOS), qui est une mesure de la qualité globale du service basée sur les évaluations
des utilisateurs.
– Analyse comportementale
Cette approche implique d'analyser les comportements des utilisateurs pour déterminer la
qualité du service. Par exemple, l'engagement et la participation des utilisateurs à une
réunion peuvent être utilisés comme indicateurs de la qualité du service.
– Essais automatisés
Cette approche implique l’utilisation d’outils automatisés pour simuler le comportement des
utilisateurs et mesurer la QoE du service. Cela peut être utile pour tester le service dans
différentes conditions de réseau et scénarios d'utilisateur.
4.3 Mesurage hybride
L’approche de mesurage hybride combine des approches de mesurage subjectif et objectif pour
évaluer la QoE des services multimédias. Cette approche est souvent utilisée pour fournir une
évaluation plus précise et plus complète de la QoE, car elle combine les avantages des deux
approches. L’approche hybride implique de collecter des données objectives et subjectives,
puis d’utiliser des méthodes statistiques pour analyser et comparer les données afin d’obtenir
un score QoE.
5 Modèle de mesure de la QoE
5.1 Modèle d'évaluation dans le temps
Le modèle d’évaluation dans le temps est un modèle de mesure de la QoE qui consiste à
mesurer les valeurs des paramètres de QoE à différentes étapes de la conférence multimédia,
à savoir avant, pendant et après la conférence. Il est essentiel de déterminer le moment
approprié pour chaque paramètre de QoE à mesurer. Des facteurs tels que l’âge de l’utilisateur,
le type d’appareil, le but d’utilisation et l’environnement de communication sont essentiels pour
mesurer la QoE avant la conférence. Ces facteurs sont collectés avant que le service
d’agrégation de paramètres QoE ne commence et que l’utilisateur ne commence à utiliser le
service. Pendant la conférence, la qualité vidéo, la qualité audio et l'état du réseau peuvent
être mesurés. Après la conférence, le niveau de satisfaction ou l'opinion globale de l'utilisateur
peut être mesuré. La Figure 1 illustre le modèle d'évaluation dans le temps.

Français d'origine Français
Network status État du réseau
Soutenu les phénomènes de commodité Fonctions pratiques

Figure 1 – Modèle d'évaluation dans le temps
5.2 Modèle d'enquête commun
Dans le modèle d'enquête commun, le MCS mesure les informations de gestion pour fournir
des services de conférence multimédia au MCC. Par exemple, celles-ci incluent le type de
service, le nombre d'utilisateurs et le trafic.
D'autre part, le CMC utilise le modèle d'enquête commun qui est une approche subjective
utilisée pour mesurer la qualité des services de conférence multimédia. Dans ce modèle, les
utilisateurs sont invités à évaluer la qualité du service sur une échelle fixe, par exemple une
échelle à cinq ou sept points. Les utilisateurs reçoivent généralement un stimulus, tel qu'un clip
vidéo ou audio, et sont invités à évaluer la qualité du stimulus en fonction d'un attribut
spécifique, tel que la qualité vidéo, la qualité audio ou la qualité globale. La Figure 2 illustre un
exemple simple de modèle d'enquête commun.

Français d'origine Français
Le nombre d'usagers (domaine des transports) Nombre d'utilisateurs
Autres phénomènes Fonctions supplémentaires

Figure 2 – Exemple simple de modèle d'enquête commun
5.3 Modèle en nid d'abeille
Le modèle en nid d'abeille peut être utilisé pour évaluer la QoE d'un service de conférence
multimédia en examinant dans quelle mesure il satisfait aux sept attributs suivants, comme
décrit dans le Tableau 2.
Tableau 2 – Attributs du modèle en nid d'abeille
Attribut Description
Utile Mesure dans laquelle le service est satisfaisant en termes d'objectifs de service
Utilisable Mesure dans laquelle le service est utilisable
Facilité avec laquelle les utilisateurs peuvent trouver les informations qu'ils veulent pendant
Convivial
qu'ils utilisent le service
Crédible Mesure dans laquelle le service multimédia peut être considéré comme un service stable
Mesure dans laquelle le service est attrayant de manière générale et attrayant pour les
Souhaitable
utilisateurs
Accessible Mesure dans laquelle le service s'adapte aux utilisateurs ayant différents besoins
Précieux Mesure dans laquelle le service offre des avantages et de la valeur aux utilisateurs

En mesurant les attributs du Tableau 2 à l'aide de diverses techniques telles que des enquêtes,
des essais d'aptitude à l'utilisation, des retours d'information des utilisateurs et des analyses,
les fournisseurs de services peuvent évaluer la QoE de leur service de conférence multimédia
et identifier les domaines d'amélioration. La Figure 3 représente le modèle en nid d'abeille.

Français d'origine Français
P1 : utilisation Utile
P2 : trouvable Convivial
P3 : utilisation Utile
P4 : trouvable Convivial
Utilisation 10 Utile 10
Trouvable 10 Convivial 10
Figure 3 – Modèle en nid d'abeille
– Utile
L'utilité du service de conférence multimédia peut être mesurée en évaluant dans quelle
mesure il répond aux besoins des utilisateurs. Cela peut être effectué par le biais d'enquêtes
auprès des utilisateurs ou en analysant les comportements des utilisateurs et l'interaction
avec le service.
– Utilisable
L'aptitude à l'utilisation du service peut être mesurée en évaluant la facilité avec laquelle
les utilisateurs naviguent et effectuent des tâches au sein du service. Ceci peut être réalisé
par des essais d'aptitude à l'utilisation et par un retour d'information de l'utilisateur.
– Convivial
La convivialité peut être mesurée en évaluant la facilité avec laquelle les utilisateurs
peuvent trouver ce qu'ils recherchent dans le service. Cela peut être fait par l'optimisation
des moteurs de recherche et les essais des utilisateurs.
– Crédible
La crédibilité du service peut être mesurée en évaluant l'exactitude et la fiabilité des
informations et du contenu fournis par le service. Cela peut être fait par le biais de retours
d'information des utilisateurs et de revues de tierces parties.
– Souhaitable
L'intérêt du service peut être mesuré en évaluant son attrait général et son attrait pour les
utilisateurs. Ceci peut être réalisé par des enquêtes auprès des utilisateurs et des
évaluations esthétiques.
– Accessible
L'accessibilité du service peut être mesurée en évaluant dans quelle mesure il s'adapte aux
utilisateurs handicapés et aux différents besoins. Cela peut être réalisé par des essais
d'accessibilité et des retours d'information des utilisateurs.
– Précieux
La valeur du service peut être mesurée en évaluant les avantages qu'il offre aux utilisateurs.
Cela peut être réalisé par des enquêtes auprès des utilisateurs et une analyse des
comportements des utilisateurs.
6 Mesurage des paramètres de QoE
6.1 Généralités
Pour le mesurage de QoE, les paramètres de QoE suivants sont pris en compte dans le
Tableau 3.
Tableau 3 – Liste des paramètres de QoE
Paramètre QoE Facteur QoE Type Obligatoire/Facultatif
Clarté visuelle Hybride Obligatoire
Qualité vidéo
Temps d'attente Objectif Obligatoire
Clarté Subjectif Obligatoire
Bruit Subjectif Obligatoire
Qualité audio Temps d'attente Objectif Obligatoire
Plage dynamique Objectif
Annulation de l'écho Objectif
Exactitude Hybride Obligatoire
Synchronisation Adaptatif Objectif
Cohérence Objectif
Accessibilité Présence de technologies d'assistance Objectif Obligatoire
Paramètre QoE Facteur QoE Type Obligatoire/Facultatif
Compatibilité avec les dispositifs
Objectif
d'assistance
Sous-titrage et transcription Objectif Obligatoire
Compatibilité entre plateformes Objectif Obligatoire
Interopérabilité Intégration avec d'autres services Objectif Obligatoire
Sécurité Objectif Obligatoire
Taille du groupe d'utilisateurs Objectif Obligatoire
Participation
Outils de collaboration Objectif Obligatoire
Transparence Objectif
Ouverture
API ouverte/SDK Objectif
Conception intuitive et conviviale Subjectif Obligatoire
Cohérence entre les plateformes Hybride
UI/UX
Personnalisation Objectif
Retours d'information et notifications Objectif Obligatoire

Pour mesurer la QoE utilisateur d'un service de conférence multimédia, différents paramètres
de QoE sont pris en compte, qui sont décrits en détail dans l'IEC 63478-2. Une autre
considération pour le mesurage est le type, qui fait référence à l’approche subjective et/ou
objective pour mesurer un facteur de QoE spécifique. Les mesurages subjectifs sont fondés
sur le retour d'information de l'utilisateur, tandis que les mesurages objectifs sont fondés sur
des mesurages quantitatifs des services de conférence multimédia ou sur l'existence ou non
de caractéristiques spécifiques. Un exemple de mesure de la QoE est donné en Annexe A.
6.2 Qualité vidéo
La qualité vidéo est un facteur critique dans les services de conférence multimédia et est
déterminée par la clarté visuelle du flux vidéo et la fluidité du flux par rapport au temps d'attente.
Les paramètres de QoE et leurs méthodes de mesure nécessaires pour mesurer la qualité vidéo
des services de conférence multimédia sont les suivants.
– Clarté visuelle
Il convient de mesurer périodiquement la clarté visuelle pour vérifier si le prestataire de
services fournit une clarté visuelle à l'utilisateur. Cela peut être mesuré pendant et après la
réunion, et cela peut être mesuré en utilisant des méthodes de mesure subjectives. Si
l'utilisateur se sent mal à l'aise en raison d'un manque de clarté visuelle pendant la réunion,
un retour d'information peut être reçu, et il peut également être mesuré par des enquêtes,
des entretiens, etc., après la fin de la réunion. De plus, pour certains services, le mesurage
peut être effectué en utilisant des méthodes de mesure objectives. Par exemple, dans le
cas d'un service de conférence multimédia qui a pour fonction d'ajuster la résolution vidéo
lorsqu'un retard du réseau se produit, ce changement peut être détecté et reflété dans
l'évaluation de la clarté vidéo.
– Temps d'attente
En cas de retard, il est principalement affecté pa
...