Оценка качества количественных исследований

ФСВОК-2014
АЛГОРИТМЫ ОЦЕНКИ КАЧЕСТВА
КОЛИЧЕСТВЕННЫХ ИССЛЕДОВАНИЙ
Уважаемые коллеги!
В данном документе приведены алгоритмы оценки качества исследований контрольных образцов количественными методами, которые будут использоваться в 2014 году в
разделах «Анализ мочи», «Анализ белка и глюкозы мочи», «Биохимия крови», «Газы,
электролиты и метаболиты крови», «Гемоглобин», «Гемоцитометрия», «Гликированный
гемоглобин», «Гормоны и витамины», «Кардиомаркеры», «Коагулология», «Контроль
гепаринотерапии», «Лейкоцитарная формула», «Липиды и аполипопротеины», «Неонатальный скрининг», «Онкомаркеры», «Пренатальный скрининг», «СА 125 и общий ПСА»,
«Специфические белки», «Факторы гемостаза», «Электрофорез белков сыворотки крови».
Пожалуйста, ознакомьтесь с этим документом – его знание необходимо для понимания
информации, которую Вы будете получать по указанным разделам (тем из них, в
которых Вы участвуете).
Участникам указанных разделов (далее – участники) в каждом цикле1 направляется по
два контрольных образца с разными буквенными индексами. Каждый контрольный образец
имеет пятизначный номер, в котором закодирован номер пула (серии) контрольных
образцов, из которого был взят данный образец. В каждом образце необходимо провести по
два измерения2 показателей, включенных в соответствующий раздел ФСВОК; при этом
один образец анализируется в один день, второй – в другой (т.е. в разных аналитических
сериях).
Результаты участников оцениваются с использованием в качестве целевых (референтных, аттестованных) значений средних величин результатов, полученных в одной и той же
группе сравнения, т.е. в группе участников, использовавших один и тот же аналитический
метод и/или один и тот же набор реагентов и/или один и тот же анализатор (метод-, реагент-,
прибор-специфичные целевые значения)3. Для большинства показателей целевые значения
рассчитываются после отброса »5% крайних значений, выпадающих за пределы диапазона
X ± 2S , где X , S – соответственно среднее значение и межлабораторное стандартное
отклонение, рассчитанные до отброса этих крайних значений4. Средние значения размахов
рассчитываются без отброса крайних значений.
Обработка результатов измерений
По результатам четырех измерений рассчитываются следующие величины:
1) Среднее значение четырех Ваших результатов ( X ):
X=
1
X Y1 + X Y2 + X Z1 + X Z2
,
4
Цикл – исследование контрольных образцов участником ФСВОК, отправка результатов исследования в
Центр внешнего контроля качества клинических лабораторных исследований (ЦВКК), получение из ЦВКК
оценки качества выполненных исследований.
2
Кроме разделов «Газы, электролиты и метаболиты крови» и «Лейкоцитарная формула», в которых
проводится по одному измерению в каждом из четырех контрольных образцов.
3
В группу сравнения могут объединяться результаты лабораторий, использующих методы (наборы реагентов,
приборы), между результатами которых не выявляются достоверные различия и для которых используются
одни и те же референтные интервалы (границы норм).
4
Такой отброс производится только для результатов, имеющих однородное унимодальное распределение. В
разделах «Гормоны и витамины», «Онкомаркеры», «Гемоцитометрия», а также для показателей других
разделов, имеющих отличное от унимодального распределение (например, амилаза), проводится отброс
только наиболее выпадающих значений.
2
где XY1 – первое измерение образца «Y», XY2 – второе измерение образца «Y», XZ1 – первое
измерение образца «Z», XZ2 – второе измерение образца «Z».
2) Относительный размах между средними значениями в двух образцах (R):
X - XZ
R= Y
×100% ,
X
где XY и XZ – соответственно средние значения определяемого показателя в образцах «Y» и
«Z» вычисляются по формулам:
X + X Y2
X + X Z2
X Y = Y1
X Z = Z1
,
.
2
2
3) Средний относительный внутридневной размах ( Q ):
Q + QZ
Q= Y
,
2
где QY и QZ – соответственно значения относительных размахов между двумя параллельными измерениями образцов «Y» и «Z», вычисляются по формулам:
X - X Y2
X - X Z2
Q Y = Y1
Q Z = Z1
×100% ,
×100%.
XY
XZ
Величина X используется для оценки правильности результатов (степени близости
среднего результатов к целевому значению; характеризуется величиной относительного
смещения – см. ниже), величина R – для оценки их воспроизводимости (степени близости
результатов измерений образцов «Y» и «Z», полученных в разные дни, между собой),
величина Q – для оценки повторяемости (степени близости результатов двух параллельных измерений одного образца между собой).
Оценки результатов контроля качества представляются на графиках (гистограммах)5 и
в таблицах, в которых наряду с прочим указаны раскодированные номера пулов.
На гистограммах наглядно представляется, как величины X , R и Q распределяются по
лабораториям, участвовавшим в данном цикле ФСВОК. Высота каждого столбца
пропорциональна числу всех лабораторий, которые получают результаты, укладывающиеся
на оси абсцисс в пределах основания этого столбца. Заштрихованные части столбцов
отражают распределение указанных величин для лабораторий, относящихся к одной группе
сравнения (названия групп сравнения указываются в скобках в правых верхних углах
гистограмм после слов «Ваша группа»). Незаштрихованные части столбцов соответствуют
результатам лабораторий из остальных групп.
Положение результата лаборатории показывается стрелкой с его численным значением
(«Ваше значение»). Вертикальной линией с прямоугольником наверху и меткой «ЦЗ» на
гистограммах средних значений показано положение целевых значений. В качестве таковых
используются средние арифметические или геометрические значения ( X ) результатов
лабораторий группы сравнения. По этим же данным рассчитываются указываемые в
таблице диапазоны допустимых значений.
Примечания.
а) при появлении 5 и более лабораторий, использовавших метод (набор реагентов,
прибор), не приведенный в соответствующем кодификаторе ФСВОК (позиция кодификатора «прочие»), они выделяются в отдельную группу сравнения, а данный метод (набор
реагентов, прибор) вносится в следующую версию кодификатора с присвоенным ему кодом,
б) в случаях, в которых число лабораторий в группе сравнения оказалось меньше 5 или
код использованного метода (набора реагентов, прибора) лабораторией не указан, качество
исследования ввиду недостаточности данных не оценивается.
5
За исключением разделов «Кардиомаркеры», «Лейкоцитарная формула», «Специфические белки», для
которых оценки представляются только в виде таблиц.
3
Серым фоном на шкале по оси абсцисс выделяются области неудовлетворительных,
т.е. выходящих за рамки допустимых значений, результатов. Соответственно, интервал
шкалы без фона определяет область допустимых значений величин X , R и Q . Крайние
точки шкалы по оси абсцисс соответствуют минимальному и максимальному значениям
этих величин.
В трех таблицах под гистограммами результаты оценки представлены в численном
виде. Приводятся следующие величины:
В первых двух строках таблицы слева приводится статистика для Вашей группы
сравнения (при наличии нескольких групп сравнения):
· Ваше среднее значение – среднее значение ( X ) полученных в конкретной лаборатории результатов.
· Целевое значение (ЦЗ) – значение, использованное для оценки правильности
результатов измерений.
· Ваше смещение, % – отклонение (B) среднего значения, полученного в конкретной
лаборатории, от целевого значения (ЦЗ) в процентах:
X - ЦЗ
B=
×100% .
ЦЗ
Неудовлетворительные (выходящие за допустимые пределы) величины смещения
помечаются звездочкой (*).
· Диапазон допустимых значений. Для расчета численных значений границ такого
диапазона в обе стороны от целевого значения откладывается определенная доля последнего,
установленная экспертной группой ФСВОК для каждого раздела в отдельности и
приведенная в скобках6. В тех случаях, когда для данного показателя не был установлен
фиксированный диапазон допустимых значений, в качестве такового используется интервал,
включающий в себя ≈90% всех значений X рассматриваемой группы сравнения: ЦЗ±1,64s,
где s – стандартное отклонение распределения величин X . Целевые значения и стандартные
отклонения, используемые для расчета границ допустимых значений, рассчитываются (за
рядом исключений) после отброса ≈5% наиболее выпадающих результатов. Таким образом, в
качестве недопустимых по правильности признаются около 15% всех результатов,
представленных в конкретном цикле.
· Число лабораторий в Вашей группе – число лабораторий в группе с одним и тем же
методом (набором реагентов, прибором) (не приводится в случае одной группы сравнения,
если число лабораторий в группе меньше 5 или код метода 99 («прочие»), или не указан).
· Коэффициент межлабораторной вариации, % – коэффициент вариации величин
X в группе сравнения (не приводится в случае одной группы сравнения, если число
лабораторий в группе меньше 5 или код метода 99 («прочие»), или не указан).
В третьей графе таблицы приводится статистика для всех лабораторий:
· Среднее всех лабораторий – среднее значение для всех лабораторий, приславших
свои результаты, независимо от используемого метода исследования (набора реагентов,
прибора). Если число лабораторий в группе меньше 5 или код метода 99 («прочие»), или не
указан, или же все результаты объединяются в одну группу сравнения, это значение
совпадает с приводимым выше целевым значением и здесь не повторяется, первая и вторая
графы таблицы объединяются в одну.
· Число всех лабораторий – общее число лабораторий, результаты которых использованы для текущей обработки данных (для большинства показателей - после отброса »5%
лабораторий с крайними значениями).
6
Для разделов «Биохимия крови», «Гормоны и витамины», «Липиды и аполипопротеины», «Онкомаркеры»,
«Коагулология», «Электрофорез белков сыворотки крови».
4
· Коэффициент межлабораторной вариации, % – характеристика разброса величин
X , рассчитывается для всех лабораторий, из которых получены результаты к началу
текущей обработки данных.
В первой и второй таблицах справа приводится статистика для междневного и внутридневного размахов:
· Ваш междневной размах, % - отношение разницы по модулю между средними
значениями в образцах «X» и «Y» к их среднему, в процентах. Неудовлетворительные
(выходящие за установленные пределы) значения междневного размаха помечаются
звездочкой (*). Если оба контрольных образца были проанализированы в один день, оценка
междневного размаха не производится (в этом случае его значение помечается символом
«#»). Если проанализирован только один контрольный образец, значение междневного
размаха не рассчитывается.
· Допустимый междневной размах, % - верхняя граница диапазона допустимых
значений относительного междневного размаха (нижняя граница – ноль). Установлен
экспертной группой ФСВОК для каждого показателя в отдельности в виде фиксированного
предела или верхнего 95%-го квантиля распределения размахов, вычисляемого как 2,46 × R ,
где R – средний междневной размах в рассматриваемой группе.
· Средний междневной размах в Вашей группе, % - средний относительный междневной размах для лабораторий Вашей группы (не приводится, если лаборатории на
группы не делятся).
· Средний междневной размах всех лабораторий, % - то же для всех лабораторий, из
которых получены результаты к началу этой обработки данных.
· Число лабораторий при оценке воспроизводимости – число лабораторий в выборке,
по которой рассчитывается средний междневной размах.
· Ваш средний внутридневной размах, % - среднее значение из двух размахов,
каждый из которых рассчитывался как разница по модулю между двумя параллельными
измерениями образцов «Y» и «Z» в процентах к их среднему. Неудовлетворительные
(выходящие за установленные пределы) значения внутридневного размаха помечаются
звездочкой (*). В случае выполнения только одного измерения из каждого контрольного
образца значение внутридневного размаха не рассчитывается.
· Допустимый средний внутридневной размах, % - верхняя граница диапазона
допустимых значений относительного внутридневного размаха (нижняя граница – ноль).
Установлен для каждого показателя в отдельности в виде фиксированного предела или
верхнего 95%-го квантиля распределения размахов, вычисляемого как 2,46 × Q , где Q –
средний внутридневной размах в рассматриваемой группе.
· Средний внутридневной размах в Вашей группе, % - средний относительный
внутридневной размах для лабораторий отдельной группы сравнения (не приводится, если
лаборатории на группы не делятся).
· Средний внутридневной размах всех лабораторий, % - то же для всех лабораторий,
из которых получены результаты к началу этой обработки данных.
· Число лабораторий при оценке повторяемости – число лабораторий в выборке, по
которой рассчитывался средний внутридневной размах.
Особенности оценки качества количественных исследований в некоторых разделах
Разделы «Кардиомаркеры», «Гормоны и витамины», «Онкомаркеры», «Специфические
белки», «СА 125 и общий ПСА». В данных разделах в случае значительных различий в
результатах, получаемых одним и тем же методом но с разными наборами реагентов,
целевые значения вычисляются для групп лабораторий, применяющих одинаковые наборы
реагентов. Если число лабораторий в группе оказывается меньше 5, оценка относительно
генерального целевого значения, полученного по результатам всех лабораторий, и оценка
5
размахов не проводится. В этом случае лабораториям предоставляются паспортные
значения, полученные производителями образцов для данного набора реагентов и
диапазоны допустимых значений, вычисленные по критериям ФСВОК. В отсутствие
паспортных значений в таком случае предоставляются только гистограммы распределения
всех результатов и размахов в совокупности, на которых результаты других лабораторий
данной группы выделены штриховкой.
Раздел «Коагулология». В данном разделе оценка качества определения протромбинового времени (ПВ) в секундах не производится, данный показатель запрашивается наряду со
средним нормальным протромбиновым временем (СНПВ) и международным индексом
чувствительности (МИЧ) для расчета МНО по формуле:
æ ПВ ö
МНО = ç
÷
è СНПВ ø
МИЧ
Рассчитанное значение МНО приводится в таблице с результатами внешней оценки
качества под рубрикой «Ваше расчетное значение МНО» для контроля погрешностей,
возникающих на этапе вычисления или калибровки прибора по образцу с установленным
значением МНО.
Раздел «Контроль гепаринотерапии». В данном разделе АЧТВ и тромбиновое время
преобразуются в величины отношений к значениям середины нормального диапазона,
которые затем подлежат оценке. Если значения нормального диапазона не были указаны,
такой результат не оценивается.
Раздел «Лейкоцитарная формула». Расчет статистических показателей, использованных для оценки качества в данном разделе, рассчитывается по следующей методике.
Ваше среднее ( X ) – рассчитывается взвешенным усреднением результатов исследования Вами двух препаратов одной и той же партии по формуле:
X=
X1 × m1 + X 2 × m 2
,
m1 + m 2
где X1 и X2 – результаты исследования двух препаратов, m1 и m2 – соответственно число
лейкоцитов, просчитанных на 1-ом и 2-ом препарате одного и того же пула.
Диапазон допустимых значений для среднего вычисляется по формуле:
ö
æ
÷
ç
p × N + 192,08
p × N + 192,08 æ
p × N + 192,08 ö ç
1
1
÷+W
D=
± 1,96 ×
× ç100 +
÷× I
ç
N + 3,8416
N + 3,8416 è
N + 3,8416 ø
N + 3,8416 ÷
÷
ç å m i + 3,8416
ø
è i =1
где p – референтное значение (РЗ) в %, N – число лейкоцитов, просчитанных экспертами,
W – поправка на межэкспертную и межпрепаратную вариацию, mi – число просчитанных
лейкоцитов на i-ом препарате данной партии в лаборатории, I – число препаратов данной
партии, исследованных в лаборатории.
Ваш размах – разница между подсчетами одного и того же вида лейкоцитов в двух
препаратах из одной партии, служит показателем воспроизводимости метода.
Допустимый размах – верхняя граница 95%-го доверительного интервала для размаха
(Rmax), рассчитывается по формуле:
R max = 2,46 × R ,
6
где R – среднее значение размахов всех участников, исследовавших данный пул,
рассчитывается по формуле:
J
R=
åR
j
j =1
,
J
где Rj – размах в j-ой лаборатории, J – число лабораторий, исследовавших данный пул.
***
Все вышеописанные принципы оценки качества основаны на предположении о том,
что результаты измерений контрольных образцов имеют нормальное распределение,
описываемое статистикой Гаусса. В тех случаях, в которых межлабораторное распределение
величин X имеет выраженную положительную асимметрию (чаще всего возникает при
высоких значениях коэффициента межлабораторной вариации – 30% и выше) применение
статистики Гаусса становится некорректным без предварительной логарифмической
нормализации. В этих случаях расчет целевого значения и диапазона допустимых значений
производится в логарифмической шкале, о чем под таблицей приводятся соответствующие
комментарии.