Interpretación de pruebas por computadora en la evaluación psicológica
Los programas de interpretación de pruebas basadas en computadora ( CBTI ) son herramientas tecnológicas que se han usado comúnmente para interpretar datos en evaluaciones psicológicas desde la década de 1960. Los programas de CBTI se utilizan para una miríada de pruebas psicológicas, como entrevistas clínicas o clasificación de problemas, pero se ejercen con mayor frecuencia en evaluaciones psicológicas y neuropsicológicas.
Los programas CBTI tienen una base empírica o clínica. Los programas empíricos, o actuarialesLos programas de evaluación utilizan análisis estadísticos para interpretar los datos, mientras que los programas con base clínica o los programas de evaluación automatizados se basan en información de expertos clínicos y de investigación.
Aunque los programas CBTI tienen éxito en la confiabilidad test-retest, ha habido grandes preocupaciones y críticas con respecto a la capacidad de los programas para evaluar la confiabilidad entre evaluadores y la consistencia interna. La investigación ha demostrado que la validezde los programas CBTI no se ha confirmado, debido a los informes variables de los programas individuales.
Los programas CBTI son muy eficientes ya que ahorran tiempo, reducen el error humano, son rentables y son objetivos / confiables, aunque limitados porque no siempre son utilizados por evaluadores adecuadamente capacitados o no están integrados con múltiples fuentes de datos. A medida que la tecnología continúa transformando nuestra sociedad moderna, los programas de interpretación basados en computadora tienen la posibilidad de expandir su software e incluso aliviar algunas de las preocupaciones actuales con la metodología de los programas.
Historia
Los métodos de prueba computarizados se introdujeron por primera vez hace más de 60 años. El primer programa capaz de interpretar datos de evaluación computarizados se desarrolló en 1962 en la Clínica Mayo. El programa se utilizó para evaluar los datos de MMPI de pacientes de hospitales y generó una lista de 110 posibles declaraciones descriptivas que correspondían a elevaciones de escala particulares.
Esta interpretación computarizada rudimentaria no está muy lejos de los métodos utilizados hoy en día. En 1969, se lanzó el primer programa capaz de generar informes narrativos basados en configuraciones de escala. Para 1985, se estimaba que hasta 1.5 millones de protocolos MMPI habían sido interpretados por programas de interpretación de prueba basados en computadora (CBTI).
En 1987existíanhasta 72 proveedores separados de más de 300productos de evaluación basados en computadora, casi la mitad de los cuales se desarrollaron para la evaluación de la personalidad. Desde este momento, la popularidad y accesibilidad de las pruebas basadas en computadora y los programas CBTI ha aumentado dramáticamente, una tendencia que continuará en el futuro a medida que aumente la utilización de la tecnología en la profesión de la salud mental.
Estado actual
Actualmente, los programas CBTI se dividen en una de dos categorías: programas de evaluación actuarial o programas de evaluación automatizados. Los programas de evaluación actuarial se basan en predicciones estadísticas o actuariales (p. Ej., Análisis estadísticos, ecuaciones de regresión lineal y reglas bayesianas), que se basa empíricamente mientras que los programas de evaluación automatizados consisten en una serie de declaraciones si-entonces derivadas por clínicos expertos e informadas por investigación publicada y experiencia clínica.
Para los fines de este artículo, ambos tipos se denominarán interpretaciones de prueba basadas en computadora (CBTI). El uso de CBTI se encuentra en una variedad de dominios psicológicos (por ejemplo, entrevistas clínicas y clasificación de problemas), pero se utiliza con mayor frecuencia en evaluaciones de personalidad y neuropsicológicas.
Este artículo se centrará en el uso de CBTI en la evaluación de la personalidad, más comúnmente utilizando el MMPI y sus ediciones revisadas posteriores.
Fiabilidad
La capacidad de los CBTI para eliminar el error humano se considera un beneficio y, como resultado, se considera que la confiabilidad de los CBTI es mejor que la de las interpretaciones clínicas. Sin embargo, los CBTI han demostrado poca fiabilidad. Se ha encontrado que la investigación con respecto a la equivalencia de los CBTI y las medidas con papel y lápiz es equívoca (para revisiones ver ).
Además, la investigación de CBTI ha sido criticada por no haber evaluado a los evaluadores (comparando la interpretación de un protocolo por dos programas diferentes) y la confiabilidad de consistencia interna(comparando la fiabilidad de diferentes secciones de la misma interpretación). Por otro lado, la fiabilidad test-retest de los CBTI se considera perfecta (es decir, el mismo protocolo producirá repetidamente la misma interpretación), si se utiliza el mismo programa.
Validez
La investigación sobre la validez de los CBTI tiende a utilizar tres tipos de estudios: estudios de criterios externos (comparando el informe CBTI con alguna medida de criterio externo del constructo, como un autoinforme o una medida de comportamiento), estudios de satisfacción del consumidor (preguntando a los clientes si el los informes son representaciones precisas de sí mismos) y la comparación con conclusiones clínicas (comparación de los informes CBTI con las interpretaciones del médico).
Se pueden encontrar revisiones exhaustivas de la validez de CBTI en otros lugares (p. Ej., ). En general, no se ha demostrado la validez de los CBTI, y se ha encontrado que la validez de los sistemas CBTI individuales varía. Sin embargo, muchos estudios de validez son defectuosos debido a muestras pequeñas, criterio de contaminación, el efecto Barnum, datos de entrada inadecuados para generar poderosas reglas de predicción estadística, falta de fiabilidad de las medidas y la práctica de generalizar a través de situaciones de prueba y poblaciones sin considerar Moderadores potenciales.
Fortalezas y debilidades
Los programas CBTI se pueden encontrar para casi todos los tipos de evaluaciones de personalidad disponibles en la actualidad. Podría decirse que los programas de CBTI tienen muchos beneficios sobre las evaluaciones tradicionales hechas a mano y las interpretaciones de los clínicos que pueden contribuir a su popularidad.
Por ejemplo, los programas CBTI ahorran tiempo y eliminan los errores de respuesta y puntuación humanos. Además, los programas de CBTI a menudo son más completos que la interpretación del médico, tienden a ser más confiables que la interpretación del médico, son rentables y más objetivos, lo que puede permitir que los clientes acepten más los comentarios.
A pesar de estos beneficios, hay limitaciones significativas de los CBTI a tener en cuenta. Por ejemplo, los informes CBTI pueden sugerir una impresión injustificada de precisión científica y los informes pueden ser demasiado generales para proporcionar información diferencial. Además, los CBTI pueden promover actitudes extremadamente arrogantes hacia la evaluación e interpretación clínica, y dado que están cada vez más disponibles para evaluadores inadecuadamente entrenados, el potencial de mal uso es alto.
Se advierte a los médicos que se eduquen antes de usar los programas CBTI, que no interpreten ciegamente los informes generados por computadora como verdaderos o que usen los CBTI como una forma de eludir sus responsabilidades como clínicos para integrar múltiples fuentes de datos.
Futuro
A medida que nuestro sistema de salud y la sociedad en su conjunto se vuelven cada vez más dependientes de la tecnología, es inevitable que la disponibilidad y el uso del software CBTI también se expandan. Se ha reconocido el potencial de internet para extender el uso de CBTI, aunque los problemas potenciales asociados con esta modalidad aún no se han entendido completamente y deberán abordarse antes de que prolifere el uso de CBTI basado en internet.
Además, la aplicación de pruebas adaptativas por computadora, aunque se aplica con éxito en otros dominios de evaluación (es decir, capacidad y aptitud), proporciona una adición prometedora, pero poco investigada, a la evaluación de la personalidad.Por último, existe un llamado para una integración más efectiva de los métodos de predicción clínicos y basados en computadora, comenzando con una asociación entre médicos e investigadores en el desarrollo de programas de CBTI.