Home Estudio de verificación de precisión y veracidad en un sistema Atellica
Article Open Access

Estudio de verificación de precisión y veracidad en un sistema Atellica

A translation of this article can be found here: https://doi.org/10.1515/almed-2020-0096
  • Alberto Vílchez Rodríguez EMAIL logo , Julia González Cantó , Sara Esteve Poblador , Carmen Valldecabres Ortiz and Pedro L. Estela Burriel
Published/Copyright: September 4, 2020

Resumen

Objetivos

El laboratorio clínico debe usar solamente procedimientos de medida validados. La precisión es una de las características más importantes para seleccionar, incorporar, validar y verificar un procedimiento de medida. El objetivo fue verificar la precisión y veracidad de varias magnitudes en distintos analizadores de bioquímica e inmunoquímica.

Materiales

Los analizadores en uso fueron Advia 1800®, Immulite®2000 y CentaurXP®, y el sistema evaluado fue Atellica®Solution. Se evaluaron cinco magnitudes para bioquímica y cinco para inmunoquímica. Para estudiar la imprecisión se utilizaron materiales de control comercial de BioRad® y Siemens®, calculando la imprecisión intraserial e interserial analizando tres replicados de cada control en una única serie cada día, durante 5 días. Para el estudio de veracidad se analizaron 40 muestras de suero diferentes mediante el análisis de diferencias y regresión lineal.

Resultados

Los valores obtenidos para la imprecisión intraserial e interserial fueron menores a los proporcionados por el fabricante en todas las magnitudes estudiadas. En el estudio de veracidad, existe error sistemático proporcional pero no constante para algunas magnitudes.

Conclusiones

Según los coeficientes de variación (CV%) obtenidos en el Atellica®Solution se verificaron las especificaciones de imprecisión proporcionadas por el fabricante y las establecidas por el laboratorio. Respecto al estudio de veracidad sería necesario para algunos parámetros, revisar las condiciones de calibración y ampliar el rango de muestras estudiado.

Introducción

Para una correcta interpretación clínica y poder comparar distintos resultados de un paciente, estos deben ser exactos.

La norma ISO 15189 para la acreditación de los laboratorios clínicos establece que el laboratorio debe utilizar solamente procedimientos validados para confirmar que son adecuados para la utilización prevista, siendo la precisión una de las características metrológicas más importantes a tener en cuenta para la selección, implantación y validación de un procedimiento de medida [1].

Los objetivos del estudio son, por una parte, verificar las prestaciones de precisión proporcionadas por el fabricante en condiciones de repetibilidad y en condiciones intermedias, calculando la imprecisión intraserial e interserial. Por otra parte, verificar la veracidad (error sistemático [ES]) de un procedimiento de medida nuevo mediante la comparación con el procedimiento de medida en uso, y así comprobar la intercambiabilidad de ambos procedimientos permitiendo mantener los valores de referencia asignados a cada magnitud evaluada.

Materiales y métodos

Este estudio se realizó en el Área de Diagnóstico Biológico del Hospital Universitario La Ribera (Alzira).

Los analizadores de bioquímica en uso fueron de Siemens Healthineers: Advia 1800® para bioquímica clínica, e Immulite®2000 y ADVIA CentaurXP® para inmunoquímica. El sistema evaluado fue Atellica®Solution (bioquímica e inmunoquímica), asumiendo como valor verdadero el que proporcionan los procedimientos de medida en uso.

Las magnitudes estudiadas en el Advia 1800® fueron: Srm-calcio; c.sust., Srm-L-lactato deshidrogenasa; c.cat. (LDH), Srm-ferritina; c.sust., Uri-albúmina; c.masa. y Uri-proteína total; c.masa.; en el ADVIA CentaurXP®: Srm-25-OH-colecalciferol; c.sust. (vitamina D) y Uri-cortisol; c.sust.; y en el Immulite®2000: Srm-N-terminal proBNP; c.sust. (NT-proBNP), Srm-proteína A plasmática asociada al embarazo; c.arb. (PAPP-A) y Srm-gonadotropina coriónica humana subunidad β; c.arb. (β-HCG).

El método de los procedimientos de medida en uso y procedimientos de medida evaluados para bioquímica fue la espectrofotometría, con cambios únicamente en la reacción para la LDH (para el método en uso de piruvato a L-lactato y para el método evaluado de L-lactato a piruvato). El método para las determinaciones de inmunoquímica, tanto en el procedimiento de medida en uso como el procedimiento de medida evaluado fue quimioluminiscencia. En el caso de la ferritina se cambió de un método inmunoturbidimétrico para el procedimiento de medida en uso a quimioluminiscencia directa para el procedimiento de medida evaluado.

Se utilizaron materiales de control comercial de BioRad®: Multiqual (calcio, ferritina y LDH), Liquichek Cardiac Markers (NT-proBNP), Immunoassay plus control (vitamina D) y Urine Chemistry (proteína total, albúmina, y cortisol en orina), y control comercial de Siemens®: IMMULITE®Systems PAA (PAPP-A) e IMMULITE®Systems FBC (β-HCG). Se consideraron para cada magnitud dos niveles de control, uno con valor cercano al de decisión clínica y otro con valor patológico, siendo estos valores similares a los utilizados por el fabricante en su estudio de imprecisión.

Para estimar la imprecisión, se siguió el documento de la SEQC basado en las guías publicadas por el Clinical and Laboratory Standards Institute (CLSI) [2], [3]:

  1. Se analizaron tres replicados de cada control en una única serie cada día, durante 5 días.

  2. Se calculó la imprecisión intraserial (CV r ):

s r = d = 1 D i = 1 n ( x d i X d ) 2 D ( n 1 ) C V r = 100 S r X t

Siendo S r  = desviación estándar intraserial, X di  = resultado del replicado i en el día d, X d  = media de resultados del día d, D = número de días (cinco), n = número de replicados por día (tres), y X t  = media de todos los resultados.

  1. Se calculó la imprecisión interserial (CV T ):

s b 2 = i = 1 D ( X d X t ) 2 D 1 s T = n 1 n S r 2 + S b 2

C V T = 100 S T X t

Siendo S b  = desviación estándar interdiaria, X d  = media de resultados del día d, X t  = media de todos los resultados, D = número de días (cinco), S T  = desviación estándar interserial, S r  = desviación estándar intraserial y n = número de replicados por día (tres).

  1. Se compararon los valores obtenidos de imprecisión intraserial e interserial con las especificaciones proporcionadas por el fabricante para el mismo rango de concentraciones. Los valores estimados debían ser iguales o inferiores a los especificados por el fabricante.

Para el estudio de veracidad se analizaron 40 muestras de diferentes pacientes en 5 series analíticas por los dos procedimientos de medida que, tras eliminar los valores aberrantes, se redujeron a 38 muestras para cortisol y β-HCG. Aproximadamente, el 50% de las muestras procesadas para cada magnitud tenían valores fuera del intervalo de referencia y todas las magnitudes presentaban concentraciones distribuidas uniformemente a lo largo del intervalo de medida.

Para el análisis de los resultados del estudio de veracidad se utilizaron dos métodos que proporcionan información complementaria [4]:

  1. Análisis de las diferencias: se calcularon las diferencias entre el resultado obtenido con el procedimiento evaluado (x) y el resultado con el procedimiento de comparación (y), se calculó el promedio de cada pareja de resultados y las diferencias relativas porcentuales (DR). La diferencia entre los resultados de los dos procedimientos se describió mediante el valor de la media de las diferencias absolutas (Dm) o relativas (DRm), calculándose los intervalos de confianza del 95% (IC 95%).

  2. Regresión lineal: se representaron los valores de “y” frente a “x”, se obtuvieron los valores de la pendiente (b) y la ordenada en el origen (a), con sus respectivos intervalos de confianza del 95%.

Resultados

En la Tabla 1 se resumen los valores obtenidos en el estudio de imprecisión intraserial (CV r ) e interserial (CV T ) junto a los valores declarados por el fabricante.

Tabla 1:

Resultados de imprecisión (%).

Magnitud Control Media x ¯ Imprecisión, %
CVr Fabricante CVr Estimado CV T Fabricante CV T Estimado
Srm-calcio; c.sust. Nivel 1 1,54 mmol/L 1,2 0,7 1,7 0,7
Nivel 3 3,27 mmol/L 0,6 0,5 0,7 0,7
Srm-L-lactato deshidrogenasa; c.cat. Nivel 1 189 U/L 0,9 0,7 1,0 0,9
Nivel 3 403 U/L 0,7 0,4 1,0 0,6
Srm-ferritina; c.sust. Nivel 1 92,1 pmol/L 1,4 1,4 4,2 1,4
Nivel 3 143,8 pmol/L 1,3 1,1 4,4 1,0
Srm-propéptido natriurético cerebral N-terminal; c.sust. Nivel 1 15,4 pmol/L 2,3 1,8 3,9 3,7
Nivel 3 377,8 pmol/L 1,8 1,7 3,7 2,8
Uri-albúmina; c.masa. Nivel 1 292 mg/L 1,4 1,0 3,6 0,9
Nivel 3 409 mg/L 1,2 0,6 1,4 0,7
Uri-proteína total; c.masa. Nivel 1 121 mg/L 4,9 1,6 5,3 1,8
Nivel 3 549 mg/L 1,2 0,7 1,9 0,6
Srm-25-OH-colecalciferol; c.sust. Nivel 1 60,3 nmol/L 5,0 4,8 8,0 4,3
Nivel 3 226,9 nmol/L 1,8 1,6 3,2 2,5
Uri-cortisol; c.sust. Nivel 1 19,5 nmol/día 2,6 2,3 8,9 4,1
Nivel 3 63,7 nmol/día 5,5 4,7 9,6 7,9
Srm-proteína A plasmática asociada al embarazo; c.arb. Nivel 1 1,54 UI/L 2,7 2,2 3,4 2,3
Nivel 3 4,17 UI/L 2,9 2,2 4,1 3,6
Srm-gonadotropina coriónica humana subunidad β; c.arb. Nivel 1 20,03 UI/L 1,5 1,1 2,5 2,4
Nivel 3 177,7 UI/L 1,3 1,0 2,3 2,0
  1. CVr , coeficiente de variación intraserial; CVT , coeficiente de variación interserial.

En la Tabla 2 se resumen los datos del estudio de veracidad, para el análisis de diferencias y regresión lineal.

Tabla 2:

Resultados estudio de veracidad.

Suero Orina
Srm-calcio Srm-L-lactato deshidrogenasa Srm-ferritina Srm-propéptido natriurético cerebral N-terminal Srm- proteína A plasmática asociada al embarazo Srm-gonadotropina coriónica humana subunidad β Srm-25-OH-colecalciferol Uri-cortisol Uri-albúmina Uri-proteína total
Análisis de diferencias IC 95% Dm (−0,03; 0,13) (200,17; 253,34) (−27,29; −4,10) (−74,73; 599,06) (−1,68; −0,98) (6,23; 9,20) (−0,77; 1,34) (−0,3; 6,14) (−34,84; 130,39) (−2,91; 6,88)
IC 95% DRm (−0,25; 1,35) (73,19; 78,69) (−1,15; 3,22) (4,68; 16,11) (−30,51; −24,81) (16,29; 21,69) (−2,7; 7,62) (−6,18; 20,48) (−2,59; 16,97) (−3,82; 19,08)
Regresión lineal IC 95% a (−1,02; 0,87) (−3,29; 77,06) (−2,31; 17,85) (−370,20; 116,17) (−0,48; 0,33) (−2,75; 3,62) (0,61; 5,16) (−10,14; −2,14) (−30,25; 3,76) (−4,24; 0,63)
IC 95% b (0,91; 1,12) (1,81; 2,22) (0,92; 0,96) (1,25; 1,43) (0,71; 0,83) (1,12; 1,29) (0,78; 0,9) (1,43; 1,91) (1,13; 1,15) (1,05; 1,07)
r 0,898 0,902 0,997 0,955 0,945 0,956 0,899 0,848 0,999 0,999
  1. IC 95%, intervalo de confianza 95%; Dm, diferencias absolutas; DRm, diferencias relativas; a, valores de la ordenada en el origen; b, valores de la pendiente; r, coeficiente de correlación.

Según el análisis de diferencias:

  1. No existe ES constante ni proporcional para proteína total, albúmina y cortisol en orina; y calcio y vitamina D en suero, ya que el IC 95% de Dm y DRm incluyen el valor 0.

  2. No existe ES constante (IC 95% Dm incluye el 0), pero sí existe ES proporcional (IC 95% DRm no incluye el 0) para NT-proBNP en suero.

  3. Existe ES constante (IC 95% Dm no incluye el 0), pero no existe ES proporcional (IC 95% DRm incluye el 0) para ferritina en suero.

  4. Existe ES constante (IC 95% Dm no incluye el 0), y ES proporcional (IC 95% DRm no incluye el 0) para LDH, PAPP-A y β-HCG en suero.

Según el análisis de regresión lineal:

  1. No existe ES constante ni proporcional para calcio en suero, ya que el IC 95% de la ordenada en el origen contiene el valor 0 y el IC 95% de la pendiente contiene el valor 1.

  2. No existe ES constante (IC 95% ordenada origen contiene el 0), pero sí existe ES proporcional (IC 95% pendiente no contiene el 1) para proteína total y albúmina en orina; y PAPP-A, β-HCG, NT-proBNP, ferritina y LDH en suero.

  3. Existe ES constante (IC 95% ordenada origen no contiene el 0), y ES proporcional (IC 95% pendiente no contiene el 1) para cortisol en orina, y vitamina D en suero.

En la Figura 1, aparece la gráfica del estudio de regresión lineal para la ferritina en suero.

Figura 1: 
Estudio de regresión lineal para ferritina en suero (pmol/L).
Figura 1:

Estudio de regresión lineal para ferritina en suero (pmol/L).

Discusión

El estudio de precisión se realizó bajo condiciones de repetibilidad e intermedias, siendo éstas últimas las que tienen mayor interés en el laboratorio clínico. Según indican los coeficientes de variación (CV%) obtenidos en el Atellica®Solution, se verifican las especificaciones de imprecisión para los distintos procedimientos de medida proporcionados por el fabricante para todas las magnitudes estudiadas, y además se cumplen las especificaciones de calidad analítica establecidas por el laboratorio basadas en la variabilidad biologica [5] para calcio, LDH, ferritina, albúmina, proteína total y NT-proBNP. Para la vitamina D, PAPP-A, cortisol y β-HCG no existen datos de variabilidad biológica pero cumplen los requisitos basados en el estado del arte obtenidos a través del programa externo de calidad de nuestro laboratorio.

En cuanto al estudio de veracidad, realizado mediante el análisis de las diferencias y el análisis de regresión lineal, se confirma que no existe ES significativo constante ni proporcional para proteína total, albúmina y cortisol en orina y ferritina, calcio y vitamina D en suero. Sin embargo, no existe ES constante, pero si proporcional para NT-proBNP, LDH, β-HCG y PAPP-A en suero. Para NT-proBNP, LDH y β-HCG la pendiente es mayor a 1, por tanto, los resultados del procedimiento de medida nuevo pueden ser proporcionalmente más altos respecto a los del procedimiento de comparación. Para PAPP-A, la pendiente es menor a 1 pudiéndose obtener resultados más bajos en el procedimiento de medida nuevo.

Según los coeficientes de correlación (r) obtenidos por el análisis de regresión lineal, son inferiores a 0,975 para NT-proBNP, LDH, PAPP-A, β-HCG, vitamina D y calcio en suero y cortisol en orina, por tanto, el intervalo de valores debe ser ampliado con muestras adicionales.

Además para LDH, el procedimiento de medida nuevo es diferente al de uso por lo que las diferencias detectadas pueden deberse a que existe un ES derivado de la diferencia entre los dos procedimientos de medida comparados y sería conveniente aplicar diferentes valores de referencia.


Autor para correspondencia: Alberto Vílchez Rodríguez, Área de Diagnóstico Biológico, Hospital Universitario La Ribera, C/ Mayor Sant Agustí, N° 20, Escalera izquierda, 2a planta, puerta 7, CP: 46600, Alzira, Valencia, España, E-mail:

  1. Nota del artículo: La versión traducida del artículo puede encontrarse aquí: https://doi.org/10.1515/almed-2020-0096

  2. Financiación de la investigación: No declarada.

  3. Contribución de los autores: Todos los autores han aceptado la responsabilidad del contenido completo del manuscrito ya prueban su envío.

  4. Conflicto de intereses: Los autores declaran no tener ningún conflicto de intereses.

  5. Aprobación ética: No se aplica.

Referencias

1. Asociación Española de Normalización (AENOR). Laboratorios Clínicos. Requisitos particulares para la calidad y la competencia. UNE-EN ISO 15189. Madrid: AENOR; 2013.Search in Google Scholar

2. Clinical and Laboratory Standards Institute (CLSI). User verification of precision and estimation of bias; approved guideline, 3rd ed. Wayne: NCCLS; 2014. EP15-A3.Search in Google Scholar

3. Estudio de la precisión de los procedimientos de medida en el laboratorio clínico. Documentos SEQC; 2014.Search in Google Scholar

4. Recomendaciones para el estudio de la veracidad en el laboratorio clínico mediante la comparación de procedimientos de medida. Documentos SEQC; 2011.Search in Google Scholar

5. Recomendación para el uso de las especificaciones de la calidad analítica. Revisión 02 (03 marzo 2014). Documentos SEQC; 2014.Search in Google Scholar

Received: 2020-04-16
Accepted: 2020-07-20
Published Online: 2020-09-04

© 2020 Alberto Vílchez Rodríguez et al., published by De Gruyter, Berlin/Boston

This work is licensed under the Creative Commons Attribution 4.0 International License.

Articles in the same Issue

  1. Editorial
  2. Brief update on coronavirus disease 2019 (COVID-19) diagnostics
  3. Breve actualización sobre el diagnóstico de la enfermedad por coronavirus 2019 (COVID-19)
  4. Challenges of COVID-19
  5. Retos de la COVID-19
  6. Review / Artículo de Revisión
  7. SARS-CoV-2: a new threat
  8. SARS-CoV-2: una nueva amenaza
  9. VALIDA project: Validation of allergy in vitro diagnostics assays (Tools and recommendations for the assessment of in vitro tests in the diagnosis of allergy)
  10. Proyecto VALIDA: Validation of ALlergy In vitro Diagnostics Assays (Herramientas y recomendaciones para la valoración de las pruebas in vitro en el diagnóstico de la alergia)
  11. Original Article / Artículo Original
  12. Biomaker evaluation for major adverse cardiovascular event development in patients undergoing cardiac Surgery
  13. Evaluación del papel de diversos biomarcadores en el desarrollo de eventos cardiovasculares adversos mayores en pacientes sometidos a cirugía cardíaca
  14. CYFRA 21-1 in patients with suspected cancer: evaluation of an optimal cutoff to assess the diagnostic efficacy and prognostic value
  15. El CYFRA 21-1 en pacientes con sospecha de cáncer: evaluación de un punto de corte óptimo para evaluar la eficacia diagnóstica y el valor pronóstico
  16. Lactose tolerance test as an alternative to hydrogen breath test in the study of lactose malabsorption
  17. Estudio del test de tolerancia a lactosa como alternativa a test de hidrógeno espirado en el estudio de la malabsorción de lactosa
  18. Precision and trueness verification study of an Atellica system
  19. Estudio de verificación de precisión y veracidad en un sistema Atellica
  20. Case Report / Caso Clínico
  21. A variant of the gene HARS detected in the clinical exome: etiology of a peripheral neuropathy undiagnosed for 20 years
  22. Variante en gen HARS detectada en exoma clínico: etiología de neuropatía periférica tras más de 20 años sin diagnóstico
  23. Letter to the Editor / Carta al Editor
  24. Stability of lactate dehydrogenase in plasma at different temperatures: post-analytical storage
  25. Estudio de la estabilidad de la actividad lactato deshidrogenasa en plasma a distintas temperaturas: conservación post-analítica
Downloaded on 30.10.2025 from https://www.degruyterbrill.com/document/doi/10.1515/almed-2020-0041/html
Scroll to top button