Приложение Е (рекомендуемое). Алгоритм оценки качества результатов испытаний при проверке квалификации испытательных (измерительных) лабораторий (с использованием z-индексов)

Приложение Е
(рекомендуемое)

Алгоритм оценки качества результатов испытаний при проверке квалификации испытательных (измерительных) лабораторий (с использованием z-индексов)

Е.1 Применение алгоритма с использованием z-индексов*(1) позволяет оценить качество результатов испытаний, полученных ИЛ при проведении МСИ, сделать выводы о качестве работы ИЛ и дать рекомендации по организации ее работ.

Е.2 Данный алгоритм предусматривает получение в каждой ИЛ одного результата определения содержания одного показателя в одном ОК. При этом МСИ могут быть организованы одним из следующих способов:

- с использованием одного аттестованного ОК с одним определяемым в нем показателем;

- с использованием одного аттестованного ОК с несколькими определяемыми в нем показателями;

- с использованием нескольких ОК одного контролируемого объекта, с одним определяемым в них показателем с значениями определяемого показателя, распределенными по диапазону измерений;

- с использованием нескольких ОК одного контролируемого объекта, из которых хотя бы один должен быть аттестован, с несколькими определяемыми в них показателями с приписанными значениями, распределенными по диапазону измерений.

Е.3 Оценка качества результатов испытаний, проведенных конкретной ИЛ, на основе единичных результатов испытаний

Е.3.1 На основе результатов испытаний провайдер вычисляет значение z-индекса (z) для каждого полученного от ИЛ-участника МСИ результата испытаний по формуле

, (Е.1)

где Х - результат испытаний;

С - приписанное значение ОК для определяемого показателя;

- среднее квадратическое отклонение допускаемой погрешности, равное ;

- допускаемая погрешность - значение характеристики погрешности*(2), установленное для методики испытаний, соответствующее приписанному значению ОК.

Примечания

1 принимают равным (см. приложение Г):

- при оценивании качества результатов испытаний с использованием приписанной характеристики погрешности методики испытаний;

- при оценивании качества результатов испытаний с использованием статистической оценки погрешности результатов испытаний, полученных по используемой в ИЛ методике испытаний.

2 Если погрешность приписанного значения ОК значима на фоне значения характеристики погрешности, установленной для методики испытаний (т.е. или ), то целесообразно учесть ее при установлении допускаемой погрешности.

Е.3.2 Заключение о качестве результатов испытаний контролируемого объекта по каждому определяемому показателю делают на основе сравнения значения с установленными нормативами контроля 2,0 и 3,0:

- при качество результатов испытаний признают удовлетворительным;

- при качество результатов испытаний признают сомнительным и подлежащим дополнительной проверке;

- при качество результатов испытаний признают неудовлетворительным.

Примечание - При использовании для оценивания качества результатов испытаний статистической оценки погрешности качество результатов испытаний признают неудовлетворительным при .

Е.4 Оценка наличия систематического сдвига в результатах испытаний, получаемых в ИЛ

Е.4.1 Данный алгоритм может быть использован при организации МСИ в соответствии с Е.2.2 - Е.2.4 при условии получения в ИЛ не менее трех результатов испытаний с применением одного НД на метод испытаний, одной методики испытаний и одной или аналогичной процедуры подготовки проб.

Е.4.2 Показатель , характеризующий систематический сдвиг в результатах испытаний, вычисляют по формуле

, (Е.2)

где - z-индекс, рассчитанный в соответствии с Е.3.1 для i-го результата испытаний, i = 1, ..., n;

n - общее число результатов испытаний, полученных в ИЛ в условиях, установленных Е.4.1.

Е.4.3 Заключение о наличии систематического сдвига в результатах испытаний делают на основе сравнения значения с установленными нормативами контроля 2,0 и 3,0:

- при признают отсутствие систематического сдвига в результатах испытаний;

- при подвергают сомнению отсутствие систематического сдвига в результатах испытаний;

- при признают наличие систематического сдвига в результатах испытаний.

Е.4.4 Наличие систематического сдвига в результатах испытаний свидетельствует о наличии значимой постоянной систематической погрешности в процедуре проведения испытаний. В этом случае ИЛ обязана выявить ошибку и внести в процедуру испытаний соответствующие изменения.

Если при проведении МСИ испытывали несколько ОК с определением в них одного показателя и обнаружили наличие систематического сдвига в результатах испытаний, это свидетельствует о наличии постоянной части систематической погрешности результатов испытаний для используемой методики испытаний. В данном случае целесообразно устранить причину появления постоянной части систематической погрешности или при невозможности этого внести обоснованную поправку в результаты испытаний.

Е.5 Оценка качества работы ИЛ по совокупности результатов испытаний, полученных при проведении МСИ (при определении одного или нескольких показателей)

Е.5.1 Данный алгоритм может быть использован при организации МСИ в соответствии с Е.2.2 - Е.2.4 при условии получения в ИЛ не менее трех результатов испытаний.

Е.5.2 На основе z-индексов, рассчитанных для каждого результата испытаний, полученного ИЛ, вычисляют значение по формуле

. (Е.3)

Е.5.3 Заключение о качестве работы ИЛ применительно к объектам и показателям, подвергнутым контролю при проведении МСИ, делают на основе сравнения значения с нормативами контроля и , зависящими от числа n рассчитанных z-индексов:

- при качество работы ИЛ признают удовлетворительным;

- при качество работы ИЛ признают сомнительным и подлежащим дополнительной проверке;

- при качество работы ИЛ признают неудовлетворительным.

Значения и приведены в таблице Е.1*(3).

Таблица Е.1 - Значения и в зависимости от числа z-индексов (n)

n
3	7,8	16,3
4	9,5	18,5
5	11,1	20,5
6	12,6	22,5
7	14,1	24,3
8	15,5	26,1
9	16,9	27,9
10	18,3	29,6
11	19,7	31,3
12	21,0	32,9

Е.5.4 При получении заключения о неудовлетворительном качестве работы ИЛ рассматривают и устраняют причины таких результатов. Если результаты испытаний, приведшие к неудовлетворительному заключению, получены одним исполнителем, принимают меры по повышению качества его работы.

Е.6 Могут быть использованы иные статистические методы в соответствии с [16]*(4) для оценки результатов испытаний.

______________________________

*(1) Алгоритм разработан на основе международного стандарта [6] с учетом РМГ 58.

*(2) В настоящем приложении в качестве характеристики погрешности приняты границы симметричного относительно нуля интервала, в которых погрешность любого из совокупности результатов испытаний, полученных по методике, находится с принятой доверительной вероятностью.

*(3) Значения и для n > 12 могут быть определены по таблицам процентных точек распределения для доверительной вероятности 95% и 99,9%.

*(4) На территории Российской Федерации действует национальный стандарт ГОСТ Р ИСО 13528-2010 Статистические методы. Применение при экспериментальной проверке компетентности посредством межлабораторных сравнительных испытаний.