Taller

“Verificación de
Métodos Cuantitativos”
 Agenda
 Introducción
 Requisito de la Calidad
 EP 15 A2
 Precisión : Planilla
 Veracidad : Planilla
 Rango Analítico
 Intervalo de Referencia
 Evaluación de Desempeño
 Introducción
 Objetivo del Taller:

- Verificar un procedimiento de medida

cuantitativo.
a)- Especificaciones del fabricante.
b)- Requisito de la Calidad seleccionado
de acuerdo al uso previsto del
procedimiento de medida.
 Introducción
 Procedimiento de medida:

 Glucosa en suero en mg/DL

 Requisito de la calidad : CLIA
 Introducción
Procedimiento de medida Glucosa en Suero
Unidades mg/dl
Requisito de la Calidad (CLIA) 6 mg /dl o 10 %
Plataforma Analítica SuperQC
Reactivo SuperQC
Alcance de la Evaluación Verificación
Precisión Glucosa en SI
Veracidad Suero en mg/dl SI
Linealidad SI
Límite de Cuantificación NO
Verificación de Intervalo de Referencia SI
 Introducción
 Herramientas estadísticas a aplicar:

Parámetro Protocolo Aplicación

Precisión EP 15 A2 SI
Veracidad EP 15 A2 SI
Linealidad EP 6 A SI
Límite de cuantificación EP 17 A No aplica
Intervalo de Referencia C 28 A3 SI
 Introducción
 Plan de trabajo:

1)- Requisito de la Calidad

2)- EP 15 A2
3)- Rango Analítico
4)- Intervalo de referencia
5)- Evaluación del Desempeño
 Agenda
 Introducción
 Requisito de la Calidad
 EP 15 A2
 Precisión : Planilla
 Veracidad : Planilla
 Rango Analítico
 Intervalo de Referencia
 Evaluación de Desempeño
 Requisito de la Calidad
 Busco en la web la información
disponible:
http://www.westgard.com/clia.htm
 Agenda
 Introducción
 Requisito de la Calidad
 EP 15 A2
 Precisión : Planilla
 Veracidad : Planilla
 Rango Analítico
 Intervalo de Referencia
 Evaluación de Desempeño
 EP 15 A2
¿Qué necesito?

a)- El protocolo.
b)- 2 materiales de control
(niveles de decisión médico)
c)- Informe del esquema interlaboratorio
e)- Inserto del fabricante
f)- Planillas de cálculo o software
 EP 15 A2
a)- El protocolo
 EP 15 A2
b)- 2 Materiales de Control
c)- Informe del esquema interlaboratorio
Nivel 1 Nivel 2
mensual acumulado mensual acumulado
 EP 15 A2
 Mejor estimación del valor verdadero
“Media acumulada del grupo par de
comparación”
Nivel 1 Nivel 2
mensual acumulado mensual acumulado

Control 1 (mg/DL) Control 2 (mg/DL)

86,58 295,8
 EP 15 A2
e)- Inserto del fabricante

Intraserial = Repetibilidad

Total = Precisión Intremedia

(Intralaboratorio) Repetibilidad

Intralaboratorio
 EP 15 A2
 Buscamos las especificaciones:
Concentración Evaluada =86,58 mg/DL

Repetibilidad

Intralaboratorio
 EP 15 A2
f)- Planilla de cálculo
 Agenda
 Introducción
 Requisito de la Calidad
 EP 15 A2
 Precisión : Planilla
 Veracidad : Planilla
 Rango Analítico
 Intervalo de Referencia
 Evaluación de Desempeño
 Precisión: Planilla

 Ingresar nombre del instrumento y su

número de serie.
Instrumento: SuperQC
N° de Serie: 12345
 Precisión: Planilla

 Ingresar el lote del reactivo y su

vencimiento:
Lote de Rvo.: 4567M100
Vto. Del Rvo.: 30/10/2012
 Precisión: Planilla

 Colocar el nombre del operador del

instrumento:
Operador: Juana Lopez
 Precisión: Planilla

 Insertar nombre del analito y unidades:

Analito: Glucosa en suero
Unidades: mg/dl
 Precisión: Planilla

 Agregar nombre del material empleado con su

lote y vencimiento si esta disponible:
Material: QC1
Vencimiento: 12/03/2014
Lote: 987654
 Precisión: Planilla

 Agregar el lote del calibrador y su

vencimiento:
Lote del Cal.: 456789
Vto. Del Cal.: 12/07/2013
 Precisión: Planilla

 Colocar la mejor estimación del valor

verdadero del material empleado.
“Material de control que participa en un
esquema interlaboratorio”
 Precisión: Planilla
Nivel 1 Nivel 2
mensual acumulado mensual acumulado

86.58 mg/dl

 Mejor estimación del valor verdadero:

Media acumulada del grupo par de
comparación
 Precisión: Planilla

 Colocar la mejor estimación del valor

verdadero del material empleado.
86.58 mg/dl

Media acumulada del grupo par de comparación

 Precisión: Planilla

 Vamos a trabajar con los datos del

inserto del fabricante.
 Precisión : Planilla
Premisa: Como la concentración evaluada está
próxima a la concentración ensayada por el
fabricante, se asume que podemos transferir los
CV del inserto a nuestra concentración.
CV % Concentración Evaluada
86,58 mg/DL

Repetibilidad
(Intraserial)

1,98

79,6 86,58 mg/DL

 Precisión : Planilla
“Como la concentración evaluada está próxima a
la concentración ensayada por el fabricante, se
asume que podemos transferir los CV del inserto
a nuestra concentración.”
CV % Concentración Evaluada
86,58 mg/DL

Intralaboratorio
(Total)

2,15

79,6 86,58 mg/DL

 Precisión: Planilla
 ¿Qué tengo?
Nivel de decisión CVr CVi
médica
86,58 mg/DL 1,98 % 2,15 %

 ¿Qué necesito?
Nivel de CVr SDr CVi SDi
decisión
médica (NDM)
86,58 mg/DL 1,98 % 2,15 %
 Precisión: Planilla

CV = SD x 100 Media: 86.58 mg/dl

Media CVr: 1.98 %

SDr = CVr * Media

100

SDr = 1.98 * 86.56

100

SDr = 1.714 mg/dl

 Precisión: Planilla

CV = SD x 100 Media: 86.58 mg/dl

Media CVi: 2.15 %

SDi = CVi * Media

100

SDi = 2.15 * 86.56

100

SDi = 1.816 mg/dl

 Precisión : Planilla
 Efectuar las corridas por triplicado
durante 5 días y obtener los datos.

Día 1 Día 2 Día 3 Día 4 Día 5

01/05/2012 02/05/2012 03/05/2012 04/05/2012 05/05/2012
86,4 86,4 84,6 84,5 83,9
86,6 86,7 84,2 85,1 84,7
84,9 86,3 85,3 85,1 84,2
 Precisión: Planilla

 Ingresar las fechas de cada una de las 5

corridas:
1, 2, 3, 4 y 5 de Mayo del 2012
 Precisión: Planilla

 Ingresar los triplicados de cada uno de

los 5 dias.
Precisión: Planilla
 Precisión: Planilla
 La planilla efectúa los cálculos:
Precisión: Planilla
La planilla
saca sus
conclusiones
 Precisión: Planilla
Repetibilidad

Repetibilidad
Si SDr (datos propios) < SDr (fabricante) verificada

Repetibilidad
Si SDr (datos propios) > SDr (fabricante) Aplicar
verificación
Precisión: Planilla

<
 Precisión: Planilla
Desvío estándar en condiciones de repetibilidad
obtenido a partir de nuestros datos:
0.548
Especificación del fabricante obtenida a partir
del inserto para precisión en condiciones de
repetibilidad:
1.714
¿Ha sido la precisión en condiciones de
repetibilidad aceptada? ¿Por qué?

Si 0.548 < 1.714

 Precisión: Planilla
¿Ha sido necesario aplicar una verificación
adicional? ¿Por qué?

No 0.548 < 1.714

¿Cuál es el valor de verificación (especificación

aumentada) para el desvío estándar en
condiciones de repetibilidad?

2.543
 Precisión: Planilla

Repetibilidad
Verificada
 Precisión: Planilla
Precisión Intermedia

Precisión
Si SDi (datos propios) < SDi (fabricante) Intermedia
verificada

Precisión
Si SDi (datos propios) > SDi (fabricante) Intermedia
Aplicar
verificación
Precisión: Planilla

<
 Precisión: Planilla
Desvío estándar en condiciones de precisión
intermedia obtenido a partir de nuestros datos:
1.024
Especificación del fabricante obtenida a partir
del inserto para precisión en condiciones de
precisón intermedia:
1.861
¿Ha sido la precisión en condiciones de
precisión intermedia aceptada? ¿Por qué?

Si 1.024 < 1.861

 Precisión: Planilla
¿Ha sido necesario aplicar una verificación
adicional? ¿Por qué?

No 1.024 < 1.861

¿Cuál es el valor de verificación (especificación

aumentada) para el desvío estándar en
condiciones de precisión intermedia?

2.890
Precisión: Planilla

Precisión
Intermedia
Verificada
 Agenda
 Introducción
 Requisito de la Calidad
 EP 15 A2
 Precisión : Planilla
 Veracidad : Planilla
 Rango Analítico
 Intervalo de Referencia
 Evaluación de Desempeño
 Veracidad: Planilla

 Muchos datos se cargan en forma

automática cuando son ingresados en la
planilla de precisión y otros dependen
del diseño del ensayo.
 Veracidad: Planilla

Nombre del instrumento Material empleado, lote y

y número de serie vencimiento
Nombre de analíto y Mejor estimación del
unidades valor verdadero

Lote del reactivo y Cantidad total de datos y

vencimiento cantidad de días

Lote del calibrador y

vencimiento
 Veracidad: Planilla

Mejor estimación del valor

verdadero:
“Media acumulada del
grupo par”
 Veracidad: Planilla
Sa

Sa = S.D. / √ n
Sa = 2.84 / √ 41
Sa = 0.444 mg/dl

Cantidad de replicados por

día; cantidad de corridas
analíticas (cantidad de días).
 Veracidad: Planilla
Todos estos
datos vienen
de la
planilla de
precisión
 Veracidad: Planilla

Media de los 15
resultados (3 x 5)
X X = 85.26 mg/dl
 Veracidad: Planilla

Varianza de los 15 Desvía Estándar de

datos los 15 datos
(triplicados durante (triplicados durante
5 días) 5 días)

X = 85.26 mg/dl
 Veracidad: Planilla

Grados de Libertad:=3xn -1 α: Probabilidad 0.01

α: 1 %
n : 5 (Días)
3: Replicados por día

Grados de Libertad:=3x5 -1
Grados de Libertad = 14
Veracidad: Planilla
 Veracidad: Planilla

X = 85.26 mg/dl

Sa = 0.444 mg/dl

Intervalo de Verificación = 85.26 + 2.624 x (0.9692 + 0.4442)1/2

Intervalo de Verificación = 85.26 + 2.80

 Veracidad: Planilla

85.26 – 2.80
85.26 + 2.80

Intervalo de Verificación = 85.26 + 2.80

 Veracidad: Planilla
Media acumulada del
grupo para de
comparación
Valor
Evaluado
86.58 mg/dl

Verificación
Aceptada

82.46 85.26 88.06

Intervalo de Verificación = 85.26 + 2.80
Veracidad: Planilla
Media acumulada del
grupo para de
comparación
Valor
Evaluado
86.58 mg/dl
Veracidad: Planilla

Media acumulada del

grupo para de
comparación
Valor
Evaluado
86.58 mg/dl
 Veracidad: Planilla

Media de las 15
repeticiones (triplicados
durante 5 días)
 Veracidad: Planilla

Bias (c) = Valor Obtenido – Concentración Evaluada

Bias (c) = (85.26 – 86.58) mg/dl

Bias (c) = - 1.32 mg/dl

 Veracidad: Planilla

Bias % = Valor Obtenido – Concentración Evaluada x 100

Concentración Evaluada

Bias % = [85.26 – 86.58] x 100

86.58

Bias % = 1.5 %
 Agenda
 Introducción
 Requisito de la Calidad
 EP 15 A2
 Precisión : Planilla
 Veracidad : Planilla
 Rango Analítico
 Intervalo de Referencia
 Evaluación de Desempeño
 Rango Analítico
¿Qué necesito?

a)- El protocolo.
b)- 1 muestra de concentración alta
c)- Inserto del fabricante
d)- Diluyente
e)- Software
g)- Requisito de la Calidad
h)- Material Volumétrico
 Rango Analítico
a)- El protocolo
Linealidad

Aplica el concepto de linealidad estadística y

clínica
 Rango Analítico
b)- 1 Muestra de concentración alta
c)- Inserto del fabricante
d)- Diluyente

Diluyente Solución Salina

 Rango Analítico
Protocolo de concentraciones equidistantes.
h)- Material Volumétrico
Partes iguales

0 25 50 75 100
% % % % %

Partes Partes
iguales iguales
Rango Analítico
Nombre del Laboratorio

Fecha y Operador

Método

Unidades

Comentarios

Niveles ensayos

Diluciones equidistantes

Valor Muestra 1

Valor Muestra 5

Enter
Rango Analítico

Concentraciones teóricas
de las 5 diluciones
Rango Analítico

Línea de referencia
Opción (1)
No existe referencia
Opción (2)
Línea recta
Opción (3)
Calibración, se ingresan
las concentraciones de los
calibradores altos y bajos.
Rango Analítico

Se ingresan los valores

obtenidos de los triplicados
de cada dilución y luego se
selecciona Update
 Curva Referencia
A
obtenida Orden 1

Ensayo no lineal desde

el punto de vista
estadístico

Selecciono la solapa
polinomios
Curva grado 3

Selecciono la
solapa
Nonlinearity
 Curva Referencia
obtenida Orden 1
 Rango Analítico

mg/dl

Error de no Máximo a X= 500

Promedio Unidades
linealidad mg/dl

Máximo error de no linealidad

X= 500 mg/dl
En concentración: 3.76 mg/dl
En porcentaje: 0.77 %
 Rango Analítico

mg/dl

Error de no Máximo a X= 500

Promedio Unidades
linealidad mg/dl

Máximo error de no linealidad TESa permitido se presupuesta

X= 500 mg/dl como 50% ETa
En concentración: 3.76 mg/dl TESa = 0,50 * 10%
En porcentaje: 0.77 %
TESa = 5 %
 Rango Analítico

Máximo error de no linealidad TEa (CLIA)

X= 500 mg/dl 6 mg/dl 0 10%
En concentración: 3.76 mg/dl TSEa : 0.5 * TEa
En porcentaje: 0.77 % TSEa : 3 mg/dl o 5%

Error máximo de NO linealidad < TESa

0.77 % < 5 %

LINEALIDAD CLÍNICA ACEPTADA entre 0 y 500 mg/dl

 Rango Analítico

mg/DL

Error de no Máximo a X=
Promedio Unidades
linealidad 500 mg/DL

Máximo error de no linealidad El procedimiento de medida

X= 500 mg/DL no es estadísticamente
En concentración: 3.76 mg/DL lineal en el rango de
En porcentaje: 0.77 % concentraciones evaluado

Evaluar linealidad
Clínica
 Rango Analítico

Error de no Error
Linealidad Sistemático
Hasta el 50 %
Error de no del Requisito
Hasta el 50 %
Error
Linealidad de
della Calidad
Requisito
Sistemático de la Calidad
 Rango Analítico

mg/dl

Error de no Máximo a X=
0,77 %
linealidad 500 mg/DL

ETa (CLIA) ETa * 0,5

5%
10 % (50 % del Eta)
 Rango Analítico
ETa (CLIA): 6 mg/DL o 10 % (el más grande)

Hasta el 50 % del
Error de no Requisito de la
Linealidad Calidad

0,77 % < 5%

El procedimiento de medida es clínicamente

lineal en el rango de concentraciones evaluado
considerando un ETa del 10 % con un
presupuesto de error sistemático del 50 %.
 Agenda
 Introducción
 Requisito de la Calidad
 EP 15 A2
 Precisión : Planilla
 Veracidad : Planilla
 Rango Analítico
 Intervalo de Referencia
 Evaluación de Desempeño
 Intervalo de Referencia
¿Qué necesito?

a)- El protocolo
b)- Intervalo Propuesto
c)- Cuestionario
d)- Mínimo 20 individuos “Sanos”
e)- Criterio
 Intervalos de Referencia
a)-El Protocolo
Intervalos de Referencia
(1) INDIVIDUOS DE REFERENCIA
Componen una

(2) POBLACIÓN DE REFERENCIA

De la cuál es seleccionada una

(3) MUESTRA DE GRUPO DE REFERENCIA

En la cuál son determinados

(4) VALORES DE REFERENCIA

Que caracterizan

(5) DISTRIBUCIÓN DE REFERENCIA

Desde la cuál son calculados

(8) VALOR OBSERVADO

en una persona pueden ser comparados con

(6) LÍMITES DE REFERENCIA

Que pueden definir

(7) INTERVALOS DE REFERENCIA

 Intervalos de Referencia
b)- Intervalo Propuesto
 Se identifica el intervalo de referencia
propuesto.

 Se procesan las muestras de los 20

individuos “sanos”.
 Se procesan los datos.
 Intervalos de Referencia
c)- Cuestionario con consentimiento
Examen fisco
Intervalos de Referencia
 Intervalos de Referencia

Evaluación de los datos

Si NO más de 2 valores (o hasta el 10 %) caen fuera

del intervalo propuesto

El IR se considera verificado para el Laboratorio

 Intervalos de Referencia

Evaluación de los nuevos 20 datos

Si 3 o 4 más valores (o entre el 15 y 20 %) caen

fuera del intervalo propuesto

El Laboratorio debería considerar seleccionar 20

individuos sanos nuevamente y repetir
 Intervalos de Referencia

Evaluación de los datos

Si 5 o más valores (o mas del 25 %) caen fuera del

intervalo propuesto

El Laboratorio debería considerar determinar su

propio IR
 Intervalos de Referencia
 Resumen
Cantidad de Individuos fuera Porcentaje Conclusión / Acción
del intervalo de referencia
propuesto sobre 20
individuos evaluados
< 2 < 10 % Intervalo Propuesto
Verificado
de 3 a 4 de 15 a 20 % Ensayar 20
individuos “sanos”
nuevos.
>5 > 25 % Establecer Intervalo
de Referencia

Si se evalúan mas de 20 individuos prestar atención

a los porcentajes
Cantidad de Individuos fuera Porcentaje Conclusión / Acción
Caso de Aplicación
del intervalo de referencia
propuesto sobre 20
“Herramientas: C 28 A3 ”
individuos evaluados
< 2 < 10 % Intervalo Propuesto
Verificado
de 3 a 4 de 15 a 20 % Ensayar 20
individuos “sanos”
nuevos.
>5 > 25 % Establecer Intervalo
de Referencia
Intervalos de Referencia
 Intervalos de Referencia

Cantidad total de
resultados obtenidos Porcentaje
Porcentaje == Cantidad
1 x 100 x=100
5%
a partir de individuos 20
N° Total
de referencia = 20
 Agenda
 Introducción
 Requisito de la Calidad
 EP 15 A2
 Precisión : Planilla
 Veracidad : Planilla
 Rango Analítico
 Intervalo de Referencia
 Evaluación de Desempeño
Evaluación de Desempeño
Requisito de la
Calidad
Fuente CLIA

Nivel de Decisión médica evaluado

(Mejor estimación del valor verdadero)
Evaluación de Desempeño

Bias (Sesgo) expresado

SD y CV en condiciones de
en porcentaje tomado
precisión Intermedia
de la solapa de
(intralaboratorio )
veracidad para el nivel
obtenidos de la solapa de
de decisión médica
precisión
evaluado
 Evaluación de Desempeño

Error Total
TE
Error Error
Sistemático Aleatorio
“Sesgo” “SD o CV”

TE TEa
SD: Desvío estándar
CV: Coeficiente de variación
TE: Error total
TEa: Requisito de la Calidad
 Evaluación de Desempeño

TE(c) = Sesgo(c) + Z * SD

TE(%) = Sesgo(%) + Z * CV
SD: Desvío estándar
CV: Coeficiente de variación
TE: Error total
Z: 2
Evaluación de Desempeño

TE(%) = Sesgo(%) + 2 * CV
TE(%) = 1,5(%) + 2 * 1,2
 Evaluación de Desempeño

TEa

Sigma
σ
CV Sesgo

CV: Coeficiente de variación

σ : Sigma
TEa: Requisito de la Calidad
 Evaluación de Desempeño

Sigma (σ) = ( TEa% – Sesgo% )

CV %

CV: Coeficiente de variación

σ : Sigma
TEa: Requisito de la Calidad
Evaluación de Desempeño

Sigma = (TEa – Sesgo)/CV

Sigma = (10 – 1,5)/1,2
 Evaluación de Desempeño
Sigma Desempeño
Inaceptable, no válido como procedimiento de
σ<2 medición de rutina.
Marginal, necesita que se le aplique un esquema de
2<σ<3 mejoramiento de la calidad.
Pobre, va a necesitar de un esquema de control
3<σ<4 estadístico interno de la calidad con más de una
corrida analítica (R) y varios resultados por
corrida (N).
Bueno, con un esquema de reglas múltiples se
4<σ<5 asegura la utilidad clínica de los resultados.
Muy Bueno, con un esquema de regla única se
5<σ<6 asegura la utilidad clínica de los resultados.
Excelente!!!!!!!!!!!!
σ>6
MUCHAS GRACIAS!

www.gmigliarino.com
Info@gmigliarino.com