Acceptance sampling procedures by attributes - Specified quality levels in nonconforming items per million

This International Standard specifies, for quality levels expressed as nonconforming items per million items, procedures for estimating the quality level of a single entity (e.g. a lot) and, when the production process is in statistical control, for estimating the process quality level based on evidence from several samples. Procedures are also specified for using this information when selecting a suitable sampling plan so as to verify that the quality level of a given lot does not exceed a stated limiting quality level (LQL). For the case where no prior sample data is available, guidance is given for presuming a process quality level in selecting a plan.

Règles d'échantillonnage par attributs en vue d'acceptation - Niveaux spécifiés de qualité en termes d'individus non conformes pour un million d'individus

L'ISO 14560:2004 spécifie, pour les niveaux de qualité exprimés en termes d'individus non conformes pour un million d'individus, des règles d'estimation du niveau de qualité pour une seule entité (par exemple un lot) et des règles du niveau de qualité du processus à partir de la preuve issue de plusieurs échantillons, lorsque le processus de production est en état de maîtrise statistique. Elle spécifie également des règles pour utiliser ces informations lors de la sélection d'un plan d'échantillonnage approprié afin de vérifier que le niveau de qualité d'un lot donné ne dépasse pas un niveau de qualité acceptable (NQA) spécifié. En l'absence de données d'échantillons précédents, des conseils sont donnés afin d'estimer le niveau de qualité du processus utilisé pour choisir un plan.

Postopki prevzemnega vzorčenja po opisnih spremenljivkah - Nivoji kakovosti, specificirani s številom neskladnih primerkov na milijon

Ta mednarodni standard specificira postopke ocenjevanja ravni kakovosti ene entitete (npr. partije) pri ravneh kakovosti, izraženih kot število neskladnih primerkov na milijon, in kjer se proizvodni proces statistično obvladuje za ocenjevanje procesne ravni kakovosti, osnovane na dokazih iz več vzorcev. Prav tako so specificirani postopki za uporabo teh informacij pri izbiri primernega načrta vzorčenja za potrjevanje tega, da raven kakovosti podane partije ne presega navedene mejne ravni kakovosti (LQL). V primeru, ko predhodni vzorčni podatki niso na voljo, so podane smernice za predpostavljanje procesne ravni kakovosti pri izbiri načrta.

General Information

Status
Withdrawn
Publication Date
07-Jun-2010
Withdrawal Date
04-Jun-2018
Technical Committee
Current Stage
9900 - Withdrawal (Adopted Project)
Start Date
04-Jun-2018
Due Date
27-Jun-2018
Completion Date
05-Jun-2018

Relations

Buy Standard

Standard
ISO 14560:2004 - Acceptance sampling procedures by attributes -- Specified quality levels in nonconforming items per million
English language
19 pages
sale 15% off
Preview
sale 15% off
Preview
Standard
ISO 14560:2010
English language
24 pages
sale 10% off
Preview
sale 10% off
Preview
e-Library read for
1 day
Standard
ISO 14560:2004 - Regles d'échantillonnage par attributs en vue d'acceptation -- Niveaux spécifiés de qualité en termes d'individus non conformes pour un million d'individus
French language
20 pages
sale 15% off
Preview
sale 15% off
Preview

Standards Content (Sample)

INTERNATIONAL ISO
STANDARD 14560
First edition
2004-08-15
Corrected version
2004-11-01



Acceptance sampling procedures by
attributes — Specified quality levels in
nonconforming items per million
Règles d'échantillonnage par attributs en vue d'acceptation — Niveaux
spécifiés de qualité en termes d'individus non conformes pour un million
d'individus





Reference number
ISO 14560:2004(E)
©
ISO 2004

---------------------- Page: 1 ----------------------
ISO 14560:2004(E)
PDF disclaimer
This PDF file may contain embedded typefaces. In accordance with Adobe's licensing policy, this file may be printed or viewed but
shall not be edited unless the typefaces which are embedded are licensed to and installed on the computer performing the editing. In
downloading this file, parties accept therein the responsibility of not infringing Adobe's licensing policy. The ISO Central Secretariat
accepts no liability in this area.
Adobe is a trademark of Adobe Systems Incorporated.
Details of the software products used to create this PDF file can be found in the General Info relative to the file; the PDF-creation
parameters were optimized for printing. Every care has been taken to ensure that the file is suitable for use by ISO member bodies. In
the unlikely event that a problem relating to it is found, please inform the Central Secretariat at the address given below.


©  ISO 2004
All rights reserved. Unless otherwise specified, no part of this publication may be reproduced or utilized in any form or by any means,
electronic or mechanical, including photocopying and microfilm, without permission in writing from either ISO at the address below or
ISO's member body in the country of the requester.
ISO copyright office
Case postale 56 • CH-1211 Geneva 20
Tel. + 41 22 749 01 11
Fax + 41 22 749 09 47
E-mail copyright@iso.org
Web www.iso.org
Published in Switzerland

ii © ISO 2004 – All rights reserved

---------------------- Page: 2 ----------------------
ISO 14560:2004(E)
Contents Page
Foreword .iv
Introduction.v
1 Scope.1
2 Normative references.1
3 Terms, definitions, symbols and abbreviated terms .1
4 General principles.2
4.1 Objective.2
4.2 Quality assessment of product.2
4.3 Acceptance sampling of a lot.2
5 Estimation of quality levels in nonconforming items per million items.3
5.1 Prerequisites.3
5.2 Data sources.3
5.3 Estimation of p , the process quality level .3
M
5.4 Sampling requirements and guidelines .4
5.5 Examples of estimation of the quality level.4
5.6 Reporting results.5
6 Lot acceptance sampling requirements and procedures .6
6.1 Overview.6
6.2 Requirements and guidelines .6
6.3 Lot acceptance procedure.7
6.4 Illustrated use of Table 1 .7
7 Single sampling plans indexed by LQL in nonconforming items per million items .8
Annex A (normative) Data exclusion .12
Annex B (informative) Underlying theory for generating point estimates of quality level in fraction
nonconforming .15
Annex C (informative) Statistical theory and calculation of Table 1 .17
Bibliography.19

© ISO 2004 – All rights reserved iii

---------------------- Page: 3 ----------------------
ISO 14560:2004(E)
Foreword
ISO (the International Organization for Standardization) is a worldwide federation of national standards bodies
(ISO member bodies). The work of preparing International Standards is normally carried out through ISO
technical committees. Each member body interested in a subject for which a technical committee has been
established has the right to be represented on that committee. International organizations, governmental and
non-governmental, in liaison with ISO, also take part in the work. ISO collaborates closely with the
International Electrotechnical Commission (IEC) on all matters of electrotechnical standardization.
International Standards are drafted in accordance with the rules given in the ISO/IEC Directives, Part 2.
The main task of technical committees is to prepare International Standards. Draft International Standards
adopted by the technical committees are circulated to the member bodies for voting. Publication as an
International Standard requires approval by at least 75 % of the member bodies casting a vote.
Attention is drawn to the possibility that some of the elements of this document may be the subject of patent
rights. ISO shall not be held responsible for identifying any or all such patent rights.
ISO 14560 was prepared by Technical Committee ISO/TC 69, Applications of statistical methods,
Subcommittee SC 5, Acceptance sampling.
This corrected version of ISO 14560:2004 incorporates the following correction: in Annex C the maximum
consumer's risk has been corrected to 21 %.

iv © ISO 2004 – All rights reserved

---------------------- Page: 4 ----------------------
ISO 14560:2004(E)
Introduction
For processes that produce nonconforming items relatively rarely, it is advantageous to replace traditional
methods of estimating and reporting quality levels by more suitable methods. For example, an estimated
outgoing quality level reported as 10 nonconforming items per million items carries a more immediately
comprehensible message than either 0,00001 nonconforming items per item or 0,001 nonconforming items
per 100 items. This International Standard provides alternative methods that use nonconforming items per
million items terminology in estimating and reporting quality levels.
This International Standard provides a means by which quality requirements, stated to be no worse than a
given number of nonconforming items per million items, can be verified on a lot-by-lot basis. Procedures are
also provided for estimation of the process quality level based on evidence from previous audit and/or lot
acceptance samples. Additionally, guidance is given for presuming a process quality level so that the
verification procedure can be used when prior sample data is inadequate or not available.
A key feature of this International Standard is that it provides incentives for suppliers to improve their quality.
The lot acceptance portion of this specification requires larger sample sizes when quality declines, smaller
sample sizes when quality improves. If a customer specifies the same quality requirements to multiple
suppliers of a product, those suppliers with superior quality will require, on average, smaller samples for
acceptance sampling.
This document is based upon the US Electronic Industries Alliance standards EIA-554 and EIA-555, which it
consolidates and reorients to indicate that the procedures are generic and can therefore also be used in
industrial or service applications not generally serviced by EIA.

© ISO 2004 – All rights reserved v

---------------------- Page: 5 ----------------------
INTERNATIONAL STANDARD ISO 14560:2004(E)

Acceptance sampling procedures by attributes — Specified
quality levels in nonconforming items per million
1 Scope
This International Standard specifies, for quality levels expressed as nonconforming items per million items,
procedures for estimating the quality level of a single entity (e.g. a lot) and, when the production process is in
statistical control, for estimating the process quality level based on evidence from several samples.
Procedures are also specified for using this information when selecting a suitable sampling plan so as to verify
that the quality level of a given lot does not exceed a stated limiting quality level (LQL). For the case where no
prior sample data is available, guidance is given for presuming a process quality level in selecting a plan.
2 Normative references
The following referenced documents are indispensable for the application of this document. For dated
references, only the edition cited applies. For undated references, the latest edition of the referenced
document (including any amendments) applies.
ISO 2859-1, Sampling procedures for inspection by attributes — Part 1: Sampling schemes indexed by
acceptance quality limit (AQL) for lot-by-lot inspection
ISO 3534-1, Statistics — Vocabulary and symbols — Part 1: Probability and general statistical terms
ISO 3534-2, Statistics — Vocabulary and symbols — Part 2: Statistical quality control
3 Terms, definitions, symbols and abbreviated terms
For the purposes of this document, the terms and definitions given in ISO 2859-1, ISO 3534-1 and
ISO 3534-2, and the following symbols and abbreviated terms apply.
Ac acceptance number, representing the largest number of nonconforming items found in the sample that
permits the acceptance of the lot, as given in the sampling plan
d number of nonconforming items observed
d number of nonconforming items found in the sample from the ith lot
i

LQL limiting quality level, in nonconforming items per million items (i.e. the actual quality level of a lot that
corresponds to a probability of 21 % or less of lot acceptance for the sampling plan used)
L lower limit to the assessed process quality level for a given LQL and Ac, used for selecting a plan from
P

Table 1
NOTE 1 L is the lowest actual quality level of a lot for which the probability of lot acceptance is 90 % or more for a
P
sampling plan with the given acceptance number, but which is less than 90% for a sampling plan with the next smaller
acceptance number for the same LQL.
© ISO 2004 – All rights reserved 1

---------------------- Page: 6 ----------------------
ISO 14560:2004(E)
m total number of lots that are subjected to inspection
n number of items sampled from a lot
n number of items sampled from the ith lot
i

p quality level in fraction nonconforming items
pˆ estimator of p
6
p quality level in nonconforming items per million items, p = p × 10
M M

pˆ estimator of p
M
M
P producer’s risk quality level in nonconforming items per million items (i.e. the quality level that
1,M

corresponds to a probability of lot rejection of 5 %)
P consumer’s risk quality level in nonconforming items per million items (i.e. the quality level that
2,M

corresponds to a probability of lot acceptance of 10 %)
U upper limit to the assessed process quality level for a given LQL and Ac, used for selecting a plan from
P

Table 1
NOTE 2 U is the highest actual quality level of a lot for which the probability of lot acceptance is 90 % or more for the
P
sampling plan used.
4 General principles
4.1 Objective
The objective of this International Standard is twofold: the quality assessment of product and the acceptance
sampling of a lot when quality is high, as indicated by the fact that it is typically expressed in terms of numbers
of nonconforming items per million items.
4.2 Quality assessment of product
It is assumed that the product has been through its manufacture, inspection, test and final acceptance
procedures, including procedures for eliminating unrepresentative lots.
When sampling from a consecutive series of lots, the assessment procedures in this International Standard
are applicable when
a) the production process is in statistical control, and
b) the cumulative number of inspected items (audit and/or lot acceptance items) is 400 or more.
4.3 Acceptance sampling of a lot
Sampling procedures are provided to verify that the quality is no worse than the limiting quality level (LQL). An
estimate of the process quality level in nonconforming items per million items, based on previous data, is used
to select the appropriate sampling plan. Presumption (rather than estimation) of the process quality level is
permitted when determining sampling plans for the first few lots in a series or for isolated lots, unless and until
enough data is available to form a valid estimate. It is recommended that estimation of the process quality
level commence when the total number of inspected items (audit and/or lot acceptance items) from one or
more consecutive lots is 400 or more; otherwise, continue to presume the process quality level (see 6.1). The
sampling plans in this International Standard are indexed by the LQL and the estimated (or presumed)
process quality level.
2 © ISO 2004 – All rights reserved

---------------------- Page: 7 ----------------------
ISO 14560:2004(E)
Suppliers are encouraged to not only drive their processes to a state of statistical control, but also to employ
continuous improvement techniques to raise the quality of their products. As quality levels improve, suppliers
can then benefit from this International Standard’s provision for reduction in acceptance sample size.
Acceptance sampling procedures given in this International Standard can be used when processes have
actual nonconforming quality levels of up to 37 606 nonconforming items per million items. However, selecting
a small LQL may result in a prohibitively large sample size (see Table 1). For large LQLs, existing sampling
plans in other international standards (e.g. ISO 2859-1) may be more appropriate depending upon user
requirements.
5 Estimation of quality levels in nonconforming items per million items
5.1 Prerequisites
Users of this document should confirm that all of the following are met for the products whose quality level is
being reported:
a) processes meet the assumptions of 4.2;
b) attribute sampling inspection for the characteristics being reported is conducted for product that has
completed production;
c) when products are manufactured at more than one location, product from each line or system of
production is considered separately.
5.2 Data sources
The estimation of process quality levels is based on
a) past results from audit samples that are drawn at random from the population, and/or
b) past lot acceptance data.
Data from lots that fail the lot acceptance procedure, whether audit sample data or lot acceptance data, may
be excluded from the calculations only if the conditions of Annex A are met. Inspection lots of products which
fail acceptance criteria are either assumed to be 100 % inspected with all nonconforming items being removed
from the lot, or are removed from consideration for shipment and discarded.
5.3 Estimation of p , the process quality level
M
This is as follows.
a) When sample results from only a single lot are available, from which d nonconforming items have been
found in a sample of size n, p is estimated using the formula
M
d+ 0,7
6
ˆ
p=× 10 (1)
M
n+ 0,4

A mathematical justification for Equation (1) is presented in Annex B.
© ISO 2004 – All rights reserved 3

---------------------- Page: 8 ----------------------
ISO 14560:2004(E)
b) When sample results from a series of lots are available, Equation (1) is modified to take into account
evidence from more than one lot. In this case, the process quality level in nonconforming items per million
items is estimated using the formula
m


d + 0,7
i


i=1 6
pˆ=× 10 (2)

M
m

n + 0,4
∑ i


i=1
where
m
d is the total number of nonconforming items found in the m lots;
i

i=1
m
n is the sum of the sample sizes from the m lots.
i

i=1
5.4 Sampling requirements and guidelines
These are as follows.
a) The sample size, n, and the number of nonconforming items observed, d, are determined when
performing the audit or lot acceptance of a lot before it is shipped to a customer. The items shall be
selected randomly.
b) All sample evidence from lots 1 through m shall be included, except as provided by 5.1, 5.2, 5.4 d), and
5.6.4.
c) Although, strictly speaking, re-estimation of the process quality level p should be carried out whenever
M
new sample results become available, in general it is sufficient only to re-estimate p periodically. This
M
periodic re-estimation should occur, as a minimum, whenever the total number of items from which the
previously estimated process quality level was determined increases by 20 %.
d) Although it is normally advantageous to have many lots averaged, it is permissible to discard as much old
data as the supplier deems appropriate when a process change occurs [see 5.6.4 b].
5.5 Examples of estimation of the quality level
5.5.1 Example for single data source
Suppose that eight nonconforming items have been found in samples totalling 100 000 items in all. An
estimate of the process quality level is required. From Equation (1):
80+ ,7
6
ˆ
p=×10= 87 items per millions items
M
100 000+ 0,4

4 © ISO 2004 – All rights reserved

---------------------- Page: 9 ----------------------
ISO 14560:2004(E)
5.5.2 Example for multiple data sources
Given sample data from m = 5 lots as follows,
i 1 2 3 4 5
d
0 1 0 0 1
i
n
1 000 1 500 1 000 1 500 1 500
i

then,
55

20+ ,7
6
dn==2; 6 500;pˆ= ×10= 415,36 nonconforming items per million items.

∑∑ii M
6 500+ 0,4

ii==11
5.6 Reporting results
5.6.1 Reporting fraction nonconforming in nonconforming items per million items
Results shall be reported in accordance with 5.3.
5.6.2 Period of data accumulation
The supplier is encouraged to retain as much data as is deemed appropriate for the estimation of the process
quality level. The period over which the data may be accumulated for estimating the process quality level shall
be defined by the manufacturer, but shall not exceed two years. When stating an estimated process quality
level, the manufacturer shall state the time period over which the data were accumulated.
5.6.3 Reporting requirements of estimated quality levels
Customers may require periodic reporting of estimated quality levels, including the individual sampling results.
The following shall be reported:
a) the total number of items inspected;
b) the total number of nonconforming items found.
5.6.4 Data exclusion options
The user of this International Standard may exclude data from the estimation of the process quality level when
a) the results of the current inspection lot satisfy Annex A, i.e. there is strong evidence that the process
produced a non-representative (outlier, maverick) lot as compared to preceding lots produced by the
process,
b) there has been a process change (e.g. improved statistical process control techniques have been
implemented, new and better equipment/technology has been installed, better raw material has been
obtained) which is thought to significantly improve quality, in which case all previous data may be
excluded,
c) the process has been interrupted for a period of time which may cause the process quality level to
change, in which case, all previous data may be excluded, or
d) the data is more than two years old.
© ISO 2004 – All rights reserved 5

---------------------- Page: 10 ----------------------
ISO 14560:2004(E)
6 Lot acceptance sampling requirements and procedures
6.1 Overview
When an objective assessment of the current process quality level is available, such as a recent estimate, the
provisions of this International Standard may be used to verify that the LQL has not been exceeded for a
particular lot.
When estimation of the process quality level, p, is not recommended because of a lack of sufficient prior
sample data (see 4.3), a presumed process quality level may be used instead to select a suitable sampling
plan from this International Standard. When presuming a quality level, the user is encouraged to consider the
probabilities of lot acceptance given in Table 1 for the corresponding sampling plan. For each LQL, the better
the presumed quality level, the higher the probability of accepting a lot with actual quality equal to the LQL.
Conversely, the worse the presumed quality level, the lower the probability of accepting a lot of actual quality
level equal to the LQL, but at the expense of a larger sample size. The user should presume a quality level
based on practical user requirements, not on “rewarding” or “penalizing” the producer with smaller or larger
sample sizes. This presumed value could also be based on knowledge of the quality level of similar products
produced in a similar manner.
For lot inspection, Table 1 provides single sampling plans by attributes indexed by the LQL and by ranges
including the estimated or presumed process quality levels in nonconforming items per million items. These
sampling plans have the following properties:
a) the sample sizes are harmonious with those in ISO 2859-1, except that they are twice as dense and
extend further;
b) when the actual quality level of a lot is equal to the LQL, the probability of lot acceptance does not exceed
21 %; and
c) when the actual quality level of a lot is between L and U inclusive, the probability of lot acceptance is
P P
90 % or more.
For each sampling plan listed, Table 1 provides the following additional information:
d) the producer's risk quality level (P ), i.e. the actual quality level of a lot for which there is a 5 %
1,M
probability of lot non-acceptance;
e) the consumer's risk quality level (P ), i.e. the actual quality level of a lot for which there is a 10 %
2,M
probability of lot acceptance;
f) the specific probability of lot acceptance when the actual lot quality level is equal to the LQL.
6.2 Requirements and guidelines
Lot acceptance sampling shall be at the finished product stage.
When the quality level of a process has been assessed, users of this International Standard should be aware
of the following.
a) In determining the number of nonconforming items in a sample, the entire sample shall be inspected even
when the acceptance number of the sampling plan and/or the appropriate threshold number from
Table A.1 has been exceeded.
b) While it is normally advantageous to have as many lots as possible averaged in the assessed process
average (see 5.6.2), it is permissible to discard as much old data as the supplier deems appropriate
(see 5.6.4).
6 © ISO 2004 – All rights reserved

---------------------- Page: 11 ----------------------
ISO 14560:2004(E)
6.3 Lot acceptance procedure
The procedure is as follows.
a) Estimate the process quality level from past data in accordance with Clause 5, or presume a “process”
quality level in accordance with 6.1.
b) Select the desired LQL in accordance with 6.1.
c) Determine the sample size n and acceptance number Ac by identifying the (L , U ) interval in Table 1 for
P P
which the estimated (or presumed) process quality level falls for that LQL.
If the estimated (or presumed) process quality level does not fall in a given (L , U ) interval for that LQL,
P P
the sampling plan with Ac = 7 should be used. As compared to other sampling plans given, this plan will
provide maximum consumer protection against accepting a lot whose actual quality level exceeds the
LQL [see Table 1 together with the example provided in 6.4.2 when the quality level does not fall in a
given (L , U ) interval].
P P
d) Randomly select from the lot a sample of size n and inspect each item in the sample to determine the
number of nonconforming items.
If the number of nonconforming items in the sample is less than or equal to Ac, the sample provides evidence
that the number of nonconforming items per million items does not exceed the LQL, and the lot shall be
considered acceptable.
If Ac is exceeded, the sample has failed to demonstrate that the quality is better than the LQL, and the lot
shall be considered non-acceptable.
6.4 Illustrated use of Table 1
6.4.1 Assessed process quality level falls in a given interval for the selected LQL
Suppose the estimated (or presumed) process quality level is 575 nonconforming items per million items and
the selected LQL is 6 500 nonconforming items per million items. For this LQL, 575 falls in the (L , U )
P P
interval (422, 1 064). The indicated sampling plan is n = 500, Ac = 1. Inspection of the 500 items yields three
nonconforming items. Since three exceeds Ac = 1, the sample has failed to demonstrate that the quality is
better than the LQL of 6 500, and the lot is considered to be non-acceptable.
NOTE From Table 1, the sampling plan n = 500, Ac = 1 has the following properties. When the number of
nonconforming items per million items in the entire lot is equal to:
a) 1 064 (i.e. U ) or below, the probability of lot acceptance is 90 % or more;
p
b) 711 (i.e. P ), the probability of lot acceptance is approximately 95 %;
1,M
c) 7 757 (i.e. P ), the probability of lot acceptance is approximately 10 %;
2,M
d) 6 500 (i.e. the LQL), the probability of lot acceptance is approximately 16,4 %.
6.4.2 Assessed process quality level does not fall in a given interval for the selected LQL
Suppose that the estimated (or presumed) process quality level is 1 250 nonconforming items per million
items and an LQL of 2 500 is desired. For this LQL, 1 250 does not fall in a (L , U ) interval, because the
P P
largest value of U given is 931. Following the recommendation of 6.3 c), the sampling plan n = 5 000, Ac = 7

P
is selected.
© ISO 2004 – All rights reserved 7

---------------------- Page: 12 ----------------------
ISO 14560:2004(E)
Inspection of the 5 000 items yields six nonconforming items, which is below the acceptance number of
Ac = 7. Thus, the sample does provide evidence that the LQL is not exceeded and the lot is considered to be
acceptable.
NOTE From Table 1, the sampling plan n = 5 000, Ac = 7 has the following properties. When the actual number of
nonconforming items per million items in the entire lot is equal to:
a) 931 (i.e. U ) or less, the probability of lot acceptance is 90 % or more [at an assessed or specified quality level of
P
1 250, it can be shown that the probability of lot acceptance is only about 71 % (see Annex C)];
b) 796 (i.e. P ), the probability of lot acceptance is approximately 95 %;
1,M
c) 2 353 (i.e. P ) the probability of lot acceptance is approximately 10 %;
2,M
d) 2 500 (i.e. the LQL), the probability of lot acceptance is approximately 7 %.
7 Single sampling plans indexed by LQL in nonconforming items per million items
CAUTION — For the LQL and sampling plan selected, if the actual number of nonconforming items per
million items in the entire lot and corresponding probabilities of acceptance given in Table 1 are
considered unacceptable, then procedures in this International Standard should not be used.
Table 1 provides single sampling plans indexed by LQL and entered by a prior estimate of the process quality
level in the case of a continuing series of lots, or indexed by LQL and entered by a presumed process quality
level in the case of an isolated lot or the first few lots in a series (see 4.3). All quality levels given in the table
are in nonconforming items per million items. Instructions for the use of this table are given in Clause 6.
NOTE In instances when the required sample size is larger than the lot size, it will not be possible to check for
compliance to the LQL unless the whole lot is inspected.
Table 1 — Single sampling plans indexed by LQL in nonconforming items per million items
Producer’s Consumer’s Probability of
Acceptance
Sample size risk quality risk
...

2003-01.Slovenski inštitut za standardizacijo. Razmnoževanje celote ali delov tega standarda ni dovoljeno.Règles d'échantillonnage par attributs en vue d'acceptation - Niveaux spécifiés de qualité en termes d'individus non conformes pour un million d'individusAcceptance sampling procedures by attributes - Specified quality levels in nonconforming items per million03.120.30Application of statistical methodsICS:Ta slovenski standard je istoveten z:ISO 14560:2004SIST ISO 14560:2010en01-julij-2010SIST ISO 14560:2010SLOVENSKI
STANDARD



SIST ISO 14560:2010



Reference numberISO 14560:2004(E)© ISO 2004
INTERNATIONAL STANDARD ISO14560First edition2004-08-15Corrected version2004-11-01 Acceptance sampling procedures by attributes — Specified quality levels in nonconforming items per million Règles d'échantillonnage par attributs en vue d'acceptation — Niveaux spécifiés de qualité en termes d'individus non conformes pour un million d'individus
SIST ISO 14560:2010



ISO 14560:2004(E) PDF disclaimer This PDF file may contain embedded typefaces. In accordance with Adobe's licensing policy, this file may be printed or viewed but shall not be edited unless the typefaces which are embedded are licensed to and installed on the computer performing the editing. In downloading this file, parties accept therein the responsibility of not infringing Adobe's licensing policy. The ISO Central Secretariat accepts no liability in this area. Adobe is a trademark of Adobe Systems Incorporated. Details of the software products used to create this PDF file can be found in the General Info relative to the file; the PDF-creation parameters were optimized for printing. Every care has been taken to ensure that the file is suitable for use by ISO member bodies. In the unlikely event that a problem relating to it is found, please inform the Central Secretariat at the address given below.
©
ISO 2004 All rights reserved. Unless otherwise specified, no part of this publication may be reproduced or utilized in any form or by any means, electronic or mechanical, including photocopying and microfilm, without permission in writing from either ISO at the address below or ISO's member body in the country of the requester. ISO copyright office Case postale 56 • CH-1211 Geneva 20 Tel.
+ 41 22 749 01 11 Fax
+ 41 22 749 09 47 E-mail
copyright@iso.org Web
www.iso.org Published in Switzerland
ii © ISO 2004 – All rights reserved
SIST ISO 14560:2010



ISO 14560:2004(E) © ISO 2004 – All rights reserved iii Contents Page Foreword.iv Introduction.v 1 Scope.1 2 Normative references.1 3 Terms, definitions, symbols and abbreviated terms.1 4 General principles.2 4.1 Objective.2 4.2 Quality assessment of product.2 4.3 Acceptance sampling of a lot.2 5 Estimation of quality levels in nonconforming items per million items.3 5.1 Prerequisites.3 5.2 Data sources.3 5.3 Estimation of pM, the process quality level.3 5.4 Sampling requirements and guidelines.4 5.5 Examples of estimation of the quality level.4 5.6 Reporting results.5 6 Lot acceptance sampling requirements and procedures.6 6.1 Overview.6 6.2 Requirements and guidelines.6 6.3 Lot acceptance procedure.7 6.4 Illustrated use of Table 1.7 7 Single sampling plans indexed by LQL in nonconforming items per million items.8 Annex A (normative)
Data exclusion.12 Annex B (informative)
Underlying theory for generating point estimates of quality level in fraction nonconforming.15 Annex C (informative)
Statistical theory and calculation of Table 1.17 Bibliography.19
SIST ISO 14560:2010



ISO 14560:2004(E) iv © ISO 2004 – All rights reserved Foreword ISO (the International Organization for Standardization) is a worldwide federation of national standards bodies (ISO member bodies). The work of preparing International Standards is normally carried out through ISO technical committees. Each member body interested in a subject for which a technical committee has been established has the right to be represented on that committee. International organizations, governmental and non-governmental, in liaison with ISO, also take part in the work. ISO collaborates closely with the International Electrotechnical Commission (IEC) on all matters of electrotechnical standardization. International Standards are drafted in accordance with the rules given in the ISO/IEC Directives, Part 2. The main task of technical committees is to prepare International Standards. Draft International Standards adopted by the technical committees are circulated to the member bodies for voting. Publication as an International Standard requires approval by at least 75 % of the member bodies casting a vote. Attention is drawn to the possibility that some of the elements of this document may be the subject of patent rights. ISO shall not be held responsible for identifying any or all such patent rights. ISO 14560 was prepared by Technical Committee ISO/TC 69, Applications of statistical methods, Subcommittee SC 5, Acceptance sampling. This corrected version of ISO 14560:2004 incorporates the following correction: in Annex C the maximum consumer's risk has been corrected to 21 %.
SIST ISO 14560:2010



ISO 14560:2004(E) © ISO 2004 – All rights reserved v Introduction For processes that produce nonconforming items relatively rarely, it is advantageous to replace traditional methods of estimating and reporting quality levels by more suitable methods. For example, an estimated outgoing quality level reported as 10 nonconforming items per million items carries a more immediately comprehensible message than either 0,00001 nonconforming items per item or 0,001 nonconforming items per 100 items. This International Standard provides alternative methods that use nonconforming items per million items terminology in estimating and reporting quality levels. This International Standard provides a means by which quality requirements, stated to be no worse than a given number of nonconforming items per million items, can be verified on a lot-by-lot basis. Procedures are also provided for estimation of the process quality level based on evidence from previous audit and/or lot acceptance samples. Additionally, guidance is given for presuming a process quality level so that the verification procedure can be used when prior sample data is inadequate or not available.
A key feature of this International Standard is that it provides incentives for suppliers to improve their quality. The lot acceptance portion of this specification requires larger sample sizes when quality declines, smaller sample sizes when quality improves. If a customer specifies the same quality requirements to multiple suppliers of a product, those suppliers with superior quality will require, on average, smaller samples for acceptance sampling.
This document is based upon the US Electronic Industries Alliance standards EIA-554 and EIA-555, which it consolidates and reorients to indicate that the procedures are generic and can therefore also be used in industrial or service applications not generally serviced by EIA.
SIST ISO 14560:2010



SIST ISO 14560:2010



INTERNATIONAL STANDARD ISO 14560:2004(E) © ISO 2004 – All rights reserved 1 Acceptance sampling procedures by attributes — Specified quality levels in nonconforming items per million 1 Scope This International Standard specifies, for quality levels expressed as nonconforming items per million items, procedures for estimating the quality level of a single entity (e.g. a lot) and, when the production process is in statistical control, for estimating the process quality level based on evidence from several samples. Procedures are also specified for using this information when selecting a suitable sampling plan so as to verify that the quality level of a given lot does not exceed a stated limiting quality level (LQL). For the case where no prior sample data is available, guidance is given for presuming a process quality level in selecting a plan.
2 Normative references The following referenced documents are indispensable for the application of this document. For dated references, only the edition cited applies. For undated references, the latest edition of the referenced document (including any amendments) applies. ISO 2859-1, Sampling procedures for inspection by attributes — Part 1: Sampling schemes indexed by acceptance quality limit (AQL) for lot-by-lot inspection ISO 3534-1, Statistics — Vocabulary and symbols — Part 1: Probability and general statistical terms ISO 3534-2, Statistics — Vocabulary and symbols — Part 2: Statistical quality control 3 Terms, definitions, symbols and abbreviated terms For the purposes of this document, the terms and definitions given in ISO 2859-1, ISO 3534-1 and ISO 3534-2, and the following symbols and abbreviated terms apply. Ac acceptance number, representing the largest number of nonconforming items found in the sample that permits the acceptance of the lot, as given in the sampling plan d number of nonconforming items observed di number of nonconforming items found in the sample from the ith lot LQL limiting quality level, in nonconforming items per million items (i.e. the actual quality level of a lot that corresponds to a probability of 21 % or less of lot acceptance for the sampling plan used) LP lower limit to the assessed process quality level for a given LQL and Ac, used for selecting a plan from Table 1 NOTE 1 LP is the lowest actual quality level of a lot for which the probability of lot acceptance is 90 % or more for a sampling plan with the given acceptance number, but which is less than 90% for a sampling plan with the next smaller acceptance number for the same LQL. SIST ISO 14560:2010



ISO 14560:2004(E) 2 © ISO 2004 – All rights reserved m total number of lots that are subjected to inspection n
number of items sampled from a lot ni number of items sampled from the ith lot p quality level in fraction nonconforming items ˆp estimator of p pM quality level in nonconforming items per million items, pM = p × 106 Mˆp estimator of pM P1,M producer’s risk quality level in nonconforming items per million items (i.e. the quality level that corresponds to a probability of lot rejection of 5 %) P2,M consumer’s risk quality level in nonconforming items per million items (i.e. the quality level that corresponds to a probability of lot acceptance of 10 %) UP upper limit to the assessed process quality level for a given LQL and Ac, used for selecting a plan from Table 1 NOTE 2 UP is the highest actual quality level of a lot for which the probability of lot acceptance is 90 % or more for the sampling plan used. 4 General principles 4.1 Objective The objective of this International Standard is twofold: the quality assessment of product and the acceptance sampling of a lot when quality is high, as indicated by the fact that it is typically expressed in terms of numbers of nonconforming items per million items. 4.2 Quality assessment of product It is assumed that the product has been through its manufacture, inspection, test and final acceptance procedures, including procedures for eliminating unrepresentative lots. When sampling from a consecutive series of lots, the assessment procedures in this International Standard are applicable when a) the production process is in statistical control, and b) the cumulative number of inspected items (audit and/or lot acceptance items) is 400 or more. 4.3 Acceptance sampling of a lot Sampling procedures are provided to verify that the quality is no worse than the limiting quality level (LQL). An estimate of the process quality level in nonconforming items per million items, based on previous data, is used to select the appropriate sampling plan. Presumption (rather than estimation) of the process quality level is permitted when determining sampling plans for the first few lots in a series or for isolated lots, unless and until enough data is available to form a valid estimate. It is recommended that estimation of the process quality level commence when the total number of inspected items (audit and/or lot acceptance items) from one or more consecutive lots is 400 or more; otherwise, continue to presume the process quality level (see 6.1). The sampling plans in this International Standard are indexed by the LQL and the estimated (or presumed) process quality level. SIST ISO 14560:2010



ISO 14560:2004(E) © ISO 2004 – All rights reserved 3 Suppliers are encouraged to not only drive their processes to a state of statistical control, but also to employ continuous improvement techniques to raise the quality of their products. As quality levels improve, suppliers can then benefit from this International Standard’s provision for reduction in acceptance sample size. Acceptance sampling procedures given in this International Standard can be used when processes have actual nonconforming quality levels of up to 37 606 nonconforming items per million items. However, selecting a small LQL may result in a prohibitively large sample size (see Table 1). For large LQLs, existing sampling plans in other international standards (e.g. ISO 2859-1) may be more appropriate depending upon user requirements. 5 Estimation of quality levels in nonconforming items per million items 5.1 Prerequisites
Users of this document should confirm that all of the following are met for the products whose quality level is being reported: a) processes meet the assumptions of 4.2; b) attribute sampling inspection for the characteristics being reported is conducted for product that has completed production; c) when products are manufactured at more than one location, product from each line or system of production is considered separately.
5.2 Data sources The estimation of process quality levels is based on a) past results from audit samples that are drawn at random from the population, and/or
b) past lot acceptance data. Data from lots that fail the lot acceptance procedure, whether audit sample data or lot acceptance data, may be excluded from the calculations only if the conditions of Annex A are met. Inspection lots of products which fail acceptance criteria are either assumed to be 100 % inspected with all nonconforming items being removed from the lot, or are removed from consideration for shipment and discarded. 5.3 Estimation of pM, the process quality level This is as follows. a) When sample results from only a single lot are available, from which d nonconforming items have been found in a sample of size n, pM is estimated using the formula 6M0,7ˆ100,4dpn+=×+ (1) A mathematical justification for Equation (1) is presented in Annex B. SIST ISO 14560:2010



ISO 14560:2004(E) 4 © ISO 2004 – All rights reserved b) When sample results from a series of lots are available, Equation (1) is modified to take into account evidence from more than one lot. In this case, the process quality level in nonconforming items per million items is estimated using the formula 61M10,7ˆ100,4miimiidpn==+=×+∑∑ (2) where 1miid=∑ is the total number of nonconforming items found in the m lots; 1miin=∑ is the sum of the sample sizes from the m lots. 5.4 Sampling requirements and guidelines These are as follows. a) The sample size, n, and the number of nonconforming items observed, d, are determined when performing the audit or lot acceptance of a lot before it is shipped to a customer. The items shall be selected randomly. b) All sample evidence from lots 1 through m shall be included, except as provided by 5.1, 5.2, 5.4 d), and 5.6.4. c) Although, strictly speaking, re-estimation of the process quality level pM should be carried out whenever new sample results become available, in general it is sufficient only to re-estimate pM periodically. This periodic re-estimation should occur, as a minimum, whenever the total number of items from which the previously estimated process quality level was determined increases by 20 %. d) Although it is normally advantageous to have many lots averaged, it is permissible to discard as much old data as the supplier deems appropriate when a process change occurs [see 5.6.4 b]. 5.5 Examples of estimation of the quality level 5.5.1 Example for single data source Suppose that eight nonconforming items have been found in samples totalling 100 000 items in all. An estimate of the process quality level is required. From Equation (1): 6M80,7ˆ1087100 0000,4p+=×=+items per millions items SIST ISO 14560:2010



ISO 14560:2004(E) © ISO 2004 – All rights reserved 5 5.5.2 Example for multiple data sources Given sample data from m = 5 lots as follows, i 1 2 3 4 5 di 0 1 0 0 1 ni 1 000 1 500 1 000 1 500 1 500
then, 556M1120,7ˆ2;6500;10415,3665000,4iiiidnp==+===×=+∑∑ nonconforming items per million items. 5.6 Reporting results 5.6.1 Reporting fraction nonconforming in nonconforming items per million items Results shall be reported in accordance with 5.3. 5.6.2 Period of data accumulation The supplier is encouraged to retain as much data as is deemed appropriate for the estimation of the process quality level. The period over which the data may be accumulated for estimating the process quality level shall be defined by the manufacturer, but shall not exceed two years. When stating an estimated process quality level, the manufacturer shall state the time period over which the data were accumulated. 5.6.3 Reporting requirements of estimated quality levels Customers may require periodic reporting of estimated quality levels, including the individual sampling results. The following shall be reported: a) the total number of items inspected; b) the total number of nonconforming items found. 5.6.4 Data exclusion options The user of this International Standard may exclude data from the estimation of the process quality level when a) the results of the current inspection lot satisfy Annex A, i.e. there is strong evidence that the process produced a non-representative (outlier, maverick) lot as compared to preceding lots produced by the process, b) there has been a process change (e.g. improved statistical process control techniques have been implemented, new and better equipment/technology has been installed, better raw material has been obtained) which is thought to significantly improve quality, in which case all previous data may be excluded, c) the process has been interrupted for a period of time which may cause the process quality level to change, in which case, all previous data may be excluded, or d) the data is more than two years old. SIST ISO 14560:2010



ISO 14560:2004(E) 6 © ISO 2004 – All rights reserved 6 Lot acceptance sampling requirements and procedures 6.1 Overview When an objective assessment of the current process quality level is available, such as a recent estimate, the provisions of this International Standard may be used to verify that the LQL has not been exceeded for a particular lot.
When estimation of the process quality level, p, is not recommended because of a lack of sufficient prior sample data (see 4.3), a presumed process quality level may be used instead to select a suitable sampling plan from this International Standard. When presuming a quality level, the user is encouraged to consider the probabilities of lot acceptance given in Table 1 for the corresponding sampling plan. For each LQL, the better the presumed quality level, the higher the probability of accepting a lot with actual quality equal to the LQL. Conversely, the worse the presumed quality level, the lower the probability of accepting a lot of actual quality level equal to the LQL, but at the expense of a larger sample size. The user should presume a quality level based on practical user requirements, not on “rewarding” or “penalizing” the producer with smaller or larger sample sizes. This presumed value could also be based on knowledge of the quality level of similar products produced in a similar manner. For lot inspection, Table 1 provides single sampling plans by attributes indexed by the LQL and by ranges including the estimated or presumed process quality levels in nonconforming items per million items. These sampling plans have the following properties:
a) the sample sizes are harmonious with those in ISO 2859-1, except that they are twice as dense and extend further; b) when the actual quality level of a lot is equal to the LQL, the probability of lot acceptance does not exceed 21 %; and
c) when the actual quality level of a lot is between LP and UP inclusive, the probability of lot acceptance is 90 % or more.
For each sampling plan listed, Table 1 provides the following additional information:
d) the producer's risk quality level (P1,M), i.e. the actual quality level of a lot for which there is a 5 % probability of lot non-acceptance; e) the consumer's risk quality level (P2,M), i.e. the actual quality level of a lot for which there is a 10 % probability of lot acceptance;
f) the specific probability of lot acceptance when the actual lot quality level is equal to the LQL. 6.2 Requirements and guidelines Lot acceptance sampling shall be at the finished product stage. When the quality level of a process has been assessed, users of this International Standard should be aware of the following. a) In determining the number of nonconforming items in a sample, the entire sample shall be inspected even when the acceptance number of the sampling plan and/or the appropriate threshold number from Table A.1 has been exceeded. b) While it is normally advantageous to have as many lots as possible averaged in the assessed process average (see 5.6.2), it is permissible to discard as much old data as the supplier deems appropriate (see 5.6.4). SIST ISO 14560:2010



ISO 14560:2004(E) © ISO 2004 – All rights reserved 7 6.3 Lot acceptance procedure The procedure is as follows. a) Estimate the process quality level from past data in accordance with Clause 5, or presume a “process” quality level in accordance with 6.1.
b) Select the desired LQL in accordance with 6.1.
c) Determine the sample size n and acceptance number Ac by identifying the (LP, UP) interval in Table 1 for which the estimated (or presumed) process quality level falls for that LQL. If the estimated (or presumed) process quality level does not fall in a given (LP, UP) interval for that LQL, the sampling plan with Ac = 7 should be used. As compared to other sampling plans given, this plan will provide maximum consumer protection against accepting a lot whose actual quality level exceeds the LQL [see Table 1 together with the example provided in 6.4.2 when the quality level does not fall in a given (LP, UP) interval]. d) Randomly select from the lot a sample of size n and inspect each item in the sample to determine the number of nonconforming items. If the number of nonconforming items in the sample is less than or equal to Ac, the sample provides evidence that the number of nonconforming items per million items does not exceed the LQL, and the lot shall be considered acceptable. If Ac is exceeded, the sample has failed to demonstrate that the quality is better than the LQL, and the lot shall be considered non-acceptable. 6.4 Illustrated use of Table 1 6.4.1 Assessed process quality level falls in a given interval for the selected LQL Suppose the estimated (or presumed) process quality level is 575 nonconforming items per million items and the selected LQL is 6 500 nonconforming items per million items. For this LQL, 575 falls in the (LP, UP) interval (422, 1 064). The indicated sampling plan is n = 500, Ac = 1. Inspection of the 500 items yields three nonconforming items. Since three exceeds Ac = 1, the sample has failed to demonstrate that the quality is better than the LQL of 6 500, and the lot is considered to be non-acceptable. NOTE From Table 1, the sampling plan n = 500, Ac = 1 has the following properties. When the number of nonconforming items per million items in the entire lot is equal to: a) 1 064 (i.e. Up) or below, the probability of lot acceptance is 90 % or more; b) 711 (i.e. P1,M), the probability of lot acceptance is approximately 95 %; c) 7 757 (i.e. P2,M), the probability of lot acceptance is approximately 10 %; d) 6 500 (i.e. the LQL), the probability of lot acceptance is approximately 16,4 %. 6.4.2 Assessed process quality level does not fall in a given interval for the selected LQL Suppose that the estimated (or presumed) process quality level is 1 250 nonconforming items per million items and an LQL of 2 500 is desired. For this LQL, 1 250 does not fall in a (LP, UP) interval, because the largest value of UP
given is 931. Following the recommendation of 6.3 c), the sampling plan n = 5 000, Ac = 7 is selected.
SIST ISO 14560:2010



ISO 14560:2004(E) 8 © ISO 2004 – All rights reserved Inspection of the 5 000 items yields six nonconforming items, which is below the acceptance number of Ac = 7. Thus, the sample does provide evidence that the LQL is not exceeded and the lot is considered to be acceptable. NOTE From Table 1, the sampling plan n = 5 000, Ac = 7 has the following properties. When the actual number of nonconforming items per million items in the entire lot is equal to: a) 931 (i.e. UP) or less, the probability of lot acceptance is 90 % or more [at an assessed or specified quality level of 1 250, it can be shown that the probability of lot acceptance is only about 71 % (see Annex C)]; b) 796 (i.e. P1,M), the probability of lot acceptance is approximately 95 %; c) 2 353 (i.e. P2,M) the probability of lot acceptance is approximately 10 %; d) 2 500 (i.e. the LQL), the probability of lot acceptance is approximately 7 %. 7 Single sampling plans indexed by LQL in nonconforming items per million items CAUTION — For the LQL and sampling plan selected, if the actual number of nonconforming items per million items in the entire lot and corresponding probabilities of acceptance given in Table 1 are considered unacceptable, then procedures in this International Standard should not be used. Table 1 provides single sampling plans indexed by LQL and entered by a prior estimate of the process quality level in the case of a continuing series of lots, or indexed by LQL and entered by a presumed process quality level in the case of an isolated lot or the first few lots in a series (see 4.3). All quality levels given in the table are in nonconforming items per million items. Instructions for the use of this table are given in Clause 6. NOTE In instances when the required sample size is larger than the lot size, it will not be possible to check for compliance to the LQL unless the whole lot is inspected. Table 1 — Single sampling plans indexed by LQL in nonconforming items per million items Sample size Acceptance number Producer’s risk quality level Consumer’s risk quality level Probability of acceptance at LQL LQL LP UP n Ac P1,M P2,M % 0 32 3 200 0 16 719 20,2 33 81 6 500 1 55 598 16,5 82 110 10 000 2 82 532 12,5 111 152 16 000 4 123 500 10,0 500 153 186 25 000 7 159 471 7,0 0 42 2 500 0 21 921 19,7 43 106 5 000 1 71 778 16,5 107 137 8 000 2 102 665 10,9 138 194 12 500 4 158 639 9,3 650 195 232 20 000 7 199 588 5,4 0 52 2 000 0 26 1 151 20,2
...

NORME ISO
INTERNATIONALE 14560
Première édition
2004-08-15



Règles d'échantillonnage par attributs en
vue d'acceptation — Niveaux spécifiés de
qualité en termes d'individus non
conformes pour un million d'individus
Acceptance sampling procedures by attributes — Specified quality
levels in nonconforming items per million





Numéro de référence
ISO 14560:2004(F)
©
ISO 2004

---------------------- Page: 1 ----------------------
ISO 14560:2004(F)
PDF – Exonération de responsabilité
Le présent fichier PDF peut contenir des polices de caractères intégrées. Conformément aux conditions de licence d'Adobe, ce fichier
peut être imprimé ou visualisé, mais ne doit pas être modifié à moins que l'ordinateur employé à cet effet ne bénéficie d'une licence
autorisant l'utilisation de ces polices et que celles-ci y soient installées. Lors du téléchargement de ce fichier, les parties concernées
acceptent de fait la responsabilité de ne pas enfreindre les conditions de licence d'Adobe. Le Secrétariat central de l'ISO décline toute
responsabilité en la matière.
Adobe est une marque déposée d'Adobe Systems Incorporated.
Les détails relatifs aux produits logiciels utilisés pour la création du présent fichier PDF sont disponibles dans la rubrique General Info
du fichier; les paramètres de création PDF ont été optimisés pour l'impression. Toutes les mesures ont été prises pour garantir
l'exploitation de ce fichier par les comités membres de l'ISO. Dans le cas peu probable où surviendrait un problème d'utilisation,
veuillez en informer le Secrétariat central à l'adresse donnée ci-dessous.


©  ISO 2004
Droits de reproduction réservés. Sauf prescription différente, aucune partie de cette publication ne peut être reproduite ni utilisée sous
quelque forme que ce soit et par aucun procédé, électronique ou mécanique, y compris la photocopie et les microfilms, sans l'accord écrit
de l'ISO à l'adresse ci-après ou du comité membre de l'ISO dans le pays du demandeur.
ISO copyright office
Case postale 56 • CH-1211 Geneva 20
Tel. + 41 22 749 01 11
Fax. + 41 22 749 09 47
E-mail copyright@iso.org
Web www.iso.org
Publié en Suisse

ii © ISO 2004 – Tous droits réservés

---------------------- Page: 2 ----------------------
ISO 14560:2004(F)
Sommaire Page
Avant-propos. iv
Introduction . v
1 Domaine d'application. 1
2 Références normatives. 1
3 Termes, définitions, symboles et termes abrégés . 1
4 Principes généraux. 2
4.1 Objectifs. 2
4.2 Évaluation de la qualité d'un produit . 2
4.3 Échantillonnage en vue de l'acceptation d'un lot. 3
5 Estimation des niveaux de qualité exprimée en nombre d'individus non conformes pour
un million d'individus . 3
5.1 Conditions préalables. 3
5.2 Sources de données . 3
5.3 Estimation de p , niveau de qualité du processus . 4
M
5.4 Exigences et principes directeurs d'échantillonnage. 4
5.5 Exemples d'estimation du niveau de qualité . 5
5.6 Calcul des résultats . 5
6 Exigences et règles d'échantillonnage en vue de l'acceptation d'un lot . 6
6.1 Vue d'ensemble. 6
6.2 Exigences et principes directeurs. 7
6.3 Règles d'acceptation d'un lot . 7
6.4 Exemple d'utilisation du Tableau 1 . 8
7 Plans d'échantillonnage simple indexés d'après le NQA dans le cas d'individus non
conformes pour un million d'individus. 8
Annexe A (normative) Exclusion de données . 13
Annexe B (informative) Théorie sous-jacente pour la génération d'estimations ponctuelles du
niveau de qualité exprimé par la proportion d'individus non conformes. 16
Annexe C (informative) Théorie et calcul statistiques du Tableau 1. 18
Bibliographie . 20

© ISO 2004 – Tous droits réservés iii

---------------------- Page: 3 ----------------------
ISO 14560:2004(F)
Avant-propos
L'ISO (Organisation internationale de normalisation) est une fédération mondiale d'organismes nationaux de
normalisation (comités membres de l'ISO). L'élaboration des Normes internationales est en général confiée
aux comités techniques de l'ISO. Chaque comité membre intéressé par une étude a le droit de faire partie du
comité technique créé à cet eaffet. Les organisations internationales, gouvernementales et non
gouvernementales, en liaison avec l'ISO participent également aux travaux. L'ISO collabore étroitement avec
la Commission électrotechnique internationale (CEI) en ce qui concerne la normalisation électrotechnique.
Les Normes internationales sont rédigées conformément aux règles données dans les Directives ISO/CEI,
Partie 2.
La tâche principale des comités techniques est d'élaborer les Normes internationales. Les projets de Normes
internationales adoptés par les comités techniques sont soumis aux comités membres pour vote. Leur
publication comme Normes internationales requiert l'approbation de 75 % au moins des comités membres
votants.
L'attention est appelée sur le fait que certains des éléments du présent document peuvent faire l'objet de
droits de propriété intellectuelle ou de droits analogues. L'ISO ne saurait être tenue pour responsable de ne
pas avoir identifié de tels droits de propriété et averti de leur existence.
L'ISO 14560 a été élaborée par le comité technique ISO/TC 69, Applications des méthodes statistiques,
sous-comité SC 5, Échantillonnage en vue d'acceptation.
iv © ISO 2004 – Tous droits réservés

---------------------- Page: 4 ----------------------
ISO 14560:2004(F)
Introduction
Il est avantageux de substituer des méthodes plus appropriées aux méthodes classiques d'estimation et de
consignation des niveaux de qualité des processus qui ne produisent que rarement des individus non
conformes. Par exemple, un niveau de qualité estimé à 10 individus non conformes pour un million d'individus
comporte un message plus immédiatement compréhensible que 0,00 001 individu non conforme pour un
individu ou que 0,001 individu non conforme pour 100 individus. La présente Norme internationale décrit des
méthodes alternatives d'estimation et de consignation des niveaux de qualité, utilisant le terme d'individus non
conformes pour un million d'individus.
La présente Norme internationale fournit un moyen de vérifier lot par lot les exigences de qualité, spécifiées
comme n'étant pas moins bonnes qu'un nombre donné d'individus non conformes pour un million d'individus.
Sont également fournies des règles d'estimation du niveau de qualité des processus, fondées sur des
preuves d'audit précédent et/ou des échantillons pour acceptation de lots. En plus, des conseils sont donnés
afin d'évaluer un niveau de qualité des processus de sorte que la méthode de vérification puisse être utilisée
lorsque les données d'échantillons précédents ne sont pas adaptées ou pas disponibles.
Une des caractéristiques fondamentales de la présente Norme est qu'elle incite les fournisseurs à améliorer
leur qualité. La proportion d'acceptation des lots de cette spécification requiert des effectifs d'échantillons plus
importants dans le cas d'une qualité moindre, ces effectifs étant moins importants lorsque la qualité s'améliore.
Lorsqu'un client spécifie les mêmes exigences de qualité à plusieurs fournisseurs d'un produit, les
fournisseurs présentant une qualité supérieure requièrent, en moyenne, des échantillons plus petits pour
l'échantillonnage en vue d'acceptation.
La présente Norme internationale est fondée sur les normes EIA-554 et EIA-555, introduites par l'US
Electronics Industries Alliance, qu'elle consolide et réoriente afin de démontrer que les règles énoncées sont
génériques et peuvent donc aussi être utilisées dans des applications industrielles ou de services qui ne sont
pas prévues généralement par l'EIA.

© ISO 2004 – Tous droits réservés v

---------------------- Page: 5 ----------------------
NORME INTERNATIONALE ISO 14560:2004(F)

Règles d'échantillonnage par attributs en vue d'acceptation —
Niveaux spécifiés de qualité en termes d'individus non
conformes pour un million d'individus
1 Domaine d'application
La présente Norme internationale spécifie, pour les niveaux de qualité exprimés en termes d'individus non
conformes pour un million d'individus, des règles d'estimation du niveau de qualité pour une seule entité (par
exemple un lot) et des règles du niveau de qualité du processus à partir de la preuve issue de plusieurs
échantillons, lorsque le processus de production est en état de maîtrise statistique. Elle spécifie également
des règles pour utiliser ces informations lors de la sélection d'un plan d'échantillonnage approprié afin de
vérifier que le niveau de qualité d'un lot donné ne dépasse pas un niveau de qualité acceptable (NQA)
spécifié. En l'absence de données d'échantillons précédents, des conseils sont donnés afin d'estimer le
niveau de qualité du processus utilisé pour choisir un plan.
2 Références normatives
Les documents de référence suivants sont indispensables pour l'application du présent document. Pour les
références datées, seule l'édition citée s'applique. Pour les références non datées, la dernière édition du
document de référence s'applique (y compris les éventuels amendements).
ISO 2859-1, Règles d'échantillonnage pour les contrôles par attributs — Partie 1: Procédures
d'échantillonnage pour les contrôles lot par lot, indexés d'après le niveau de qualité acceptable (NQA)
ISO 3534-1, Statistique — Vocabulaire et symboles — Partie 1: Probabilité et termes statistiques généraux
ISO 3534-2, Statistique — Vocabulaire et symboles — Partie 2: Maîtrise statistique de la qualité
3 Termes, définitions, symboles et termes abrégés
Pour les besoins du présent document, les termes et définitions donnés dans l'ISO 2859-1, l'ISO 3534-1 et
l'ISO 3534-2 et les symboles et abréviations suivants s'appliquent.
Ac Critère d'acceptation, représentant la plus grande valeur du nombre d'individus non conformes trouvés
dans l'échantillon, entraînant l'acceptation du lot, comme indiqué dans le plan d'échantillonnage.
d Nombre d'individus non conformes observés.

ème
d Nombre d'individus non conformes trouvés dans l'échantillon prélevé sur le i lot.
i

NQA Niveau de qualité acceptable exprimé en nombre d'individus non conformes pour un million d'individus
(c'est-à-dire le niveau de qualité réel d'un lot qui correspond à une probabilité d'acceptation d'un lot
inférieure ou égale à 21 % pour le plan d'échantillonnage utilisé).
L Limite inférieure du niveau de qualité estimé d'un processus avec un NQA et un Ac donnés, utilisée
P

pour choisir un plan dans le Tableau 1.
© ISO 2004 – Tous droits réservés 1

---------------------- Page: 6 ----------------------
ISO 14560:2004(F)
NOTE 1 L est le niveau de qualité réel minimal d'un lot pour lequel la probabilité d'acceptation du lot est supérieure ou
P
égale à 90 % pour un plan d'échantillonnage avec le critère d'acceptation donné, mais qui est inférieure à 90 % pour un
plan d'échantillonnage comportant le plus petit critère d'acceptation suivant pour le même NQA.
m Nombre total de lots soumis à un contrôle.
n Nombre d'individus échantillonnés à partir d'un lot.

ème
n Nombre d'individus échantillonnés dans le i lot.
i

p Niveau de qualité en proportion d'individus non conformes.
ˆ
p Estimateur de p.
p Niveau de qualité exprimé en nombre d'individus non conformes pour un million d'individus,
M

6
p = p × 10 .
M
pˆ Estimateur de p
M.
M
P Niveau de qualité du risque du fournisseur exprimé en nombre d'individus non conformes pour un
1,M

million d'individus (c'est-à-dire le niveau de qualité qui correspond à une probabilité de non-acceptation
du lot de 5 %).
P Niveau de qualité du risque du client exprimé en nombre d'individus non conformes pour un million
2,M

d'individus (c'est-à-dire le niveau de qualité qui correspond à une probabilité d'acceptation du lot de
10 %).
U Limite supérieure du niveau de qualité estimé d'un processus avec un NQA et un Ac donnés, utilisée
P

pour choisir un plan dans le Tableau 1.
NOTE 2 U est le niveau de qualité réel maximal d'un lot pour lequel la probabilité d'acceptation du lot est supérieure
P
ou égale à 90 % pour le plan d'échantillonnage utilisé.
4 Principes généraux
4.1 Objectifs
La présente Norme a un double objectif: l'évaluation de la qualité d'un produit et l'échantillonnage en vue de
l'acceptation d'un lot, lorsque la qualité est élevée, comme indiqué par le fait qu'elle est généralement
exprimée en termes de nombres d'individus non conformes pour un million d'individus.
4.2 Évaluation de la qualité d'un produit
Il est supposé que le produit a été soumis aux procédures de fabrication, de contrôle, d'essai et d'acceptation
définitive — y compris les procédures de rejet de lots non représentatifs.
Dans le cas d'un échantillonnage d'une série continue de lots, les règles d'évaluation décrites dans la
présente Norme internationale sont applicables lorsque
a) le processus de production fait l'objet d'une maîtrise statistique, et
b) le nombre cumulé d'individus contrôlés (individus pour acceptation de lots et/ou vérification) est supérieur
ou égal à 400.
2 © ISO 2004 – Tous droits réservés

---------------------- Page: 7 ----------------------
ISO 14560:2004(F)
4.3 Échantillonnage en vue de l'acceptation d'un lot
Les règles d'échantillonnage sont destinées à vérifier que la qualité n'est pas moins bonne que le niveau de
qualité acceptable (NQA). Une estimation du niveau de qualité du processus, exprimée en nombre d'individus
non conformes pour un million d'individus et fondée sur des données précédentes, est utilisée pour
sélectionner le plan d'échantillonnage approprié. Une présupposition (plutôt qu'une estimation) du niveau de
qualité du processus est autorisée lors de la détermination des plans d'échantillonnage pour les quelques
premiers lots d'une série ou pour des lots isolés, à moins que et jusqu'à ce qu'une quantité suffisante de
données soit disponible pour formuler une estimation valable. Il est recommandé que l'estimation du niveau
de qualité du processus commence lorsque le nombre total d'individus contrôlés (individus pour acceptation
de lots et/ou vérification) d'un ou plusieurs lots consécutifs est supérieur ou égal à 400. Sinon, il est
recommandé de continuer à présupposer le niveau de qualité du processus (voir 6.1). Les plans
d'échantillonnage figurant dans la présente Norme sont indexés d'après le NQA et le niveau de qualité estimé
(ou supposé) du processus.
On encourage les fournisseurs à orienter leurs processus vers un état de maîtrise statistique, mais aussi à
employer des techniques d'amélioration continue pour augmenter la qualité de leurs produits. Si les niveaux
de qualité s'améliorent, les fournisseurs peuvent alors bénéficier de cette disposition de la Norme pour réduire
l'effectif d'échantillon pour acceptation.
Les règles d'échantillonnage en vue d'acceptation décrites dans la présente Norme internationale peuvent
être utilisées lorsque les processus présentent des niveaux de qualité non conformes réels de
37 606 individus non conformes pour un million d'individus, au maximum. Cependant, le choix d'un NQA faible
peut entraîner un effectif d'échantillon prohibitivement trop grand (voir Tableau 1). Pour les NQA élevés, les
plans d'échantillonnage existants, figurant dans d'autres Normes internationales (par exemple
l'ISO 2859-1), peuvent être plus appropriés, selon les exigences des utilisateurs.
5 Estimation des niveaux de qualité exprimée en nombre d'individus non
conformes pour un million d'individus
5.1 Conditions préalables
Il convient que les utilisateurs du présent document vérifient que toutes les conditions suivantes sont
respectées pour les produits dont le niveau de qualité va être relevé:
a) les processus respectent les hypothèses données en 4.2;
b) le contrôle par échantillonnage et par attributs des caractéristiques à relever doit être effectué pour le
produit dont la production est terminée;
c) quand des produits sont fabriqués sur plus d'un site, le produit de chaque ligne ou système de production
est considéré individuellement.
5.2 Sources de données
L'estimation des niveaux de qualité du processus repose sur
a) les résultats déjà obtenus avec des échantillons de vérification prélevés sur la population de manière
aléatoire, et/ou
b) les données passées d'acceptation du lot.
Les données relatives aux lots qui n'ont pas satisfait à la procédure d'acceptation d'un lot, que ce soient des
données d'échantillons pour vérification ou pour acceptation de lots, peuvent être exclues des calculs
uniquement si les conditions spécifiées à l'Annexe A sont satisfaites. Les lots pour contrôle des produits qui
ne satisfont pas aux critères d'acceptation sont soit supposés être soumis à un contrôle à 100 % avec retrait
du lot de tous les individus non conformes, soit ils ne sont plus destinés à être expédiés et sont refusés.
© ISO 2004 – Tous droits réservés 3

---------------------- Page: 8 ----------------------
ISO 14560:2004(F)
5.3 Estimation de p , niveau de qualité du processus
M
L'estimation du niveau de qualité du processus s'effectue comme suit.
a) Dans le cas d'un échantillonnage à partir d'un lot unique, où d unités non conformes ont été observées
dans un échantillon d'effectif n, la valeur p est estimée à l'aide de la formule suivante:
M
d+ 0,7
6
ˆ
p=×10 (1)
M
n+ 0,4

L'Annexe B de la présente Norme donne une justification mathématique de l'Équation (1).
b) Dans le cas d'un échantillonnage à partir d'une série de lots, l'Équation (1) est modifiée pour prendre en
compte les résultats obtenus avec plusieurs lots. Dans ce cas, le niveau de qualité du processus,
exprimé en nombre d'individus non conformes pour un million d'individus, est estimé à l'aide de la formule
suivante:
m

d + 0,7

i

6
i=1
pˆ=× 10 (2)

M m

n + 0,4
i



i=1


m
d est la somme du nombre d'individus non conformes trouvés dans les m lots;
∑ i
i=1
m
n est la somme des effectifs d'échantillon des m lots.
∑ i
i=1
5.4 Exigences et principes directeurs d'échantillonnage
Ils sont les suivants.
a) L'effectif d'échantillon, n, et le nombre d'individus non conformes observé, d, sont déterminés lors de la
vérification ou de l'acceptation d'un lot avant de l'expédier à un client. Les individus doivent être
sélectionnés de manière aléatoire.
b) Tous les résultats obtenus avec les échantillons prélevés sur les lots 1 à m doivent être inclus, sauf pour
ce qui est spécifié en 5.1, 5.2, 5.4 d) et 5.6.4.
c) Bien qu'à proprement parler il convienne de procéder à une nouvelle estimation du niveau de qualité p
M
du processus chaque fois que de nouveaux résultats d'échantillonnage sont disponibles, il est
généralement suffisant de réestimer p périodiquement, au moins toutes les fois qu'augmente de 20 % le
M
total cumulé de tous les individus dont le niveau de qualité du processus estimé précédemment a été
déterminé.
d) Bien qu'il soit normalement avantageux de calculer la moyenne de nombreux lots, il est admis de refuser
autant de données caduques que le fournisseur le juge approprié en cas de modification du processus
[voir 5.6.4 b)].
4 © ISO 2004 – Tous droits réservés

---------------------- Page: 9 ----------------------
ISO 14560:2004(F)
5.5 Exemples d'estimation du niveau de qualité
5.5.1 Exemple avec une source de données unique
Supposons que huit individus non conformes aient été détectés dans des échantillons d'un nombre total de
100 000 individus. Une estimation du niveau de qualité du processus est alors requise. À partir de
l'Équation (1), on obtient:

80+ ,7
6
pˆ=×10= 87 individus pour un million d'individus.

M
100 000+ 0,4

5.5.2 Exemple avec plusieurs sources de données
Soient les données d'échantillons d'un nombre de lots m = 5 lots,
i 1 2 3 4 5
d
0 1 0 0 1
i
n
1 000 1 500 1 000 1 500 1 500
i

On obtient alors
55

20+ ,7
6
dn==2; 6 500;pˆ= ×10= 415,36 individus non conformes pour un million
ii M
∑∑
6 500+ 0,4

ii==11
d'individus.
5.6 Calcul des résultats
5.6.1 Calcul de la proportion d'individus non conformes pour un million d'individus
Les résultats doivent être calculés en utilisant la méthode indiquée en 5.3.
5.6.2 Période de collecte des données
Le fournisseur est encouragé à retenir le plus possible de données jugées appropriées pour estimer le niveau
de qualité du processus. La période au cours de laquelle les données nécessaires à l'estimation du niveau de
qualité du processus peuvent être collectées doit être définie par le fabricant, mais ne doit pas dépasser deux
ans. Lors de la spécification d'un niveau de qualité de processus estimé, le fabricant doit indiquer la période
au cours de laquelle les données ont été collectées.
5.6.3 Consignation des exigences relatives aux niveaux de qualité estimés
Les clients peuvent requérir une consignation régulière des niveaux de qualité estimés, y compris les résultats
de l'échantillonnage individuel. Les informations suivantes doivent faire l'objet d'un calcul:
a) le nombre total d'individus ayant fait l'objet d'un contrôle;
b) le nombre total d'individus non conformes trouvés.
© ISO 2004 – Tous droits réservés 5

---------------------- Page: 10 ----------------------
ISO 14560:2004(F)
5.6.4 Possibilités d'exclure des données
L'utilisateur de la présente Norme internationale peut exclure des données de l'estimation du niveau de
qualité du processus lorsque:
a) les résultats du lot pour contrôle sont conformes à l'Annexe A, c'est-à-dire qu'il existe une preuve solide
selon laquelle le processus a produit un lot non représentatif (valeur aberrante, non-conformité) par
rapport aux lots précédents produits par le processus;
b) le processus a changé (par exemple mise en place de techniques améliorées de contrôle statistique de
processus, installation d'équipements ou de technologies nouveaux et améliorés, obtention de matières
premières de meilleure qualité, etc.) et que cela est supposé améliorer considérablement la qualité. Dans
ce cas, toutes les données précédentes peuvent être exclues;
c) le processus est interrompu pour une période qui peut causer une modification du niveau de qualité du
processus; dans ce cas, toutes les données précédentes peuvent être exclues;
d) les données datent de plus de deux ans.
6 Exigences et règles d'échantillonnage en vue de l'acceptation d'un lot
6.1 Vue d'ensemble
Lorsque l'on dispose d'une estimation objective du niveau de qualité du processus actuel, telle qu'une
estimation récente, les dispositions de la présente Norme internationale peuvent être utilisées pour vérifier
que le NQA (niveau de qualité acceptable) n'a pas été dépassé pour un lot particulier.
Lorsque l'estimation du niveau de qualité d'un processus, p, n'est pas recommandée car il n'y a pas
suffisamment de données d'échantillons précédents (voir 4.3), on peut utiliser un niveau de qualité de
processus supposé pour sélectionner un plan d'échantillonnage approprié à partir de la présente Norme
internationale. Lorsqu'il suppose un niveau de qualité, l'utilisateur de la présente Norme internationale est
invité à prendre en considération les probabilités d'acceptation de lots indiquées dans le Tableau 1 pour le
plan d'échantillonnage correspondant. Pour chaque NQA, plus est élevé le niveau de qualité supposé, plus
est grande la probabilité d'acceptation d'un lot ayant une qualité réelle égale au NQA. À l'inverse, plus est
faible le niveau de qualité supposé, plus est faible la probabilité d'acceptation d'un lot ayant un niveau de
qualité réel égal au NQA, aux dépens d'un plus grand effectif d'échantillon. Il est recommandé que l'utilisateur
suppose un niveau de qualité fondé sur des exigences pratiques de l'utilisateur, sans «favoriser» ni
«pénaliser» le fabricant avec des effectifs d'échantillons plus faibles ou plus grands. La valeur supposée
pourrait alors être fondée sur la connaissance du niveau de qualité de produits similaires fabriqués de
manière similaire.
Pour le contrôle par lots, le Tableau 1 fournit des plans d'échantillonnage simple par attributs indexés d'après
le NQA et les étendues comprenant les niveaux de qualité du processus estimés ou supposés, exprimés en
nombre d'individus non conformes pour un million d'individus. Les propriétés de ces plans d'échantillonnage
sont les suivantes:
a) les effectifs d'échantillons correspondent à ceux décrits dans l'ISO 2859-1, sauf qu'ils sont deux fois plus
denses et plus étendus;
b) lorsque le niveau de qualité réel d'un lot est égal au NQA, la probabilité d'acceptation du lot ne dépasse
pas 21 %;
c) lorsque le niveau de qualité réel d'un lot se situe entre L et U inclus, la probabilité d'acceptation du lot
P P
est supérieure ou égale à 90 %.
6 © ISO 2004 – Tous droits réservés

---------------------- Page: 11 ----------------------
ISO 14560:2004(F)
Pour chaque plan d'échantillonnage indiqué, le Tableau 1 fournit les informations supplémentaires suivantes:
d) le niveau de qualité du risque du fournisseur, P , c'est-à-dire le niveau de qualité réel d'un lot pour
1,M
lequel la probabilité de non-acceptation du lot est de 5 %;
e) le niveau de qualité du risque du client, P , c'est-à-dire le niveau de qualité réel d'un lot pour lequel la
2,M
probabilité d'acceptation du lot est de 10 %; et
f) la probabilité particulière d'acceptation du lot lorsque le niveau de qualité réel de ce dernier est égal au
NQA.
6.2 Exigences et principes directeurs
L'échantillonnage en vue de l'acceptation d'un lot doit s'effectuer sur le produit fini.
Quand le niveau de qualité d'un processus a été évalué, il convient que les utilisateurs de la présente Norme
internationale prennent conscience des points suivants:
a) pour déterminer le nombre d'individus non conformes dans un échantillon, un contrôle de l'échantillon
complet doit être effectué même lorsque le critère d'acceptation du plan d'échantillonnage et/ou le
nombre seuil approprié indiqué dans le Tableau A.1 a été dépassé;
b) alors qu'il est normalement avantageux d'effectuer la moyenne du plus grand nombre possible de lots
dans la moyenne du processus évalué (voir 5.6.2), il est admis de rejeter toutes les données jugées
caduques par le fournisseur (voir 5.6.4).
6.3 Règles d'acceptation d'un lot
La procédure est la suivante.
a) Estimer le niveau de qualité du processus à partir de données passées, conformément à l'Article 5, ou
supposer le niveau de qualité d'un «processus» conformément à 6.1.
b) Sélectionner le NQA souhaité conformément à 6.1.
c) Déterminer l'effectif d'échantillon, n, et le critère d'acceptation, Ac, en identifiant l'intervalle (L , U ) du
P P

Tableau 1 à l'intérieur duquel se trouve le niveau de qualité estimé (ou supposé) du processus, pour le
NQA considéré.
Si le niveau de qualité évalué (ou supposé) du processus ne se situe pas dans un intervalle (L , U )
P P

donné pour le NQA considéré, il est recommandé d'utiliser le plan d'échantillonnage avec un critère
d'acceptation Ac = 7. Comparé aux autres plans d'échantillonnage donnés, ce plan prévoit une protection
maximale du client contre l'acceptation d'un lot dont le niveau de qualité réel est supérieur au NQA [voir
Tableau 1 avec l'exemple four
...

Questions, Comments and Discussion

Ask us and Technical Secretary will try to provide an answer. You can facilitate discussion about the standard in here.