Herramientas de evaluación del riesgo de violencia plagadas de 'sesgo de autoría'

El uso de instrumentos de evaluación de riesgos actuariales para predecir la violencia se está volviendo cada vez más central en la práctica de la psicología forense. Y los médicos y los tribunales confían en los datos publicados para establecer que las herramientas cumplen con sus demandas de separar con precisión a los delincuentes de alto riesgo de los de bajo riesgo.

Pero resulta que la validez predictiva de los instrumentos de evaluación de riesgos, como el Static-99 y el VRAG, depende en parte de la conexión del investigador con el instrumento en cuestión.

Los estudios publicados creados por los diseñadores de herramientas informaron los hallazgos de validez predictiva alrededor de dos veces más que las investigaciones realizadas por investigadores independientes, de acuerdo con un metaanálisis sistemático que incluyó 30.165 participantes en 104 muestras de 83 estudios independientes.

• Gornish Helfin (Nada va a ayudar)
• Una propuesta modesta
• ¿Estás sintiendo la presión para la pérdida de peso de la boda?
• Lógica de la prisión
• Marcando el Ser

Conflictos de interés amortajados

Para agravar el problema, en ningún caso los diseñadores de instrumentos informaron abiertamente sobre este potencial conflicto de intereses, incluso cuando las políticas de una revista exigían dicha divulgación.

Como señalan los autores del estudio, los diseñadores de un instrumento tienen un gran interés en que su procedimiento funcione bien. Los beneficios financieros de los manuales, las hojas de codificación y las sesiones de capacitación dependen en parte de la precisión percibida de una herramienta de evaluación de riesgos. Indirectamente, los desarrolladores de instrumentos exitosos pueden ser contratados como testigos expertos, atraer fondos para investigación y lograr reconocimiento profesional y promoción profesional.

Estas posibles recompensas pueden hacer que los diseñadores de herramientas se muestren más reacios a publicar estudios en los que el rendimiento de sus instrumentos sea deficiente. Este "problema del archivador", bien establecido en otros campos científicos, ha dado lugar a un llamado para que los investigadores registren públicamente los estudios previstos por adelantado, antes de que se conozcan sus resultados.

• Una riqueza de tiempo
• Adolescentes enojados
• ¿Cómo el fútbol puerquito puede mejorar las habilidades de relación de los hombres?
• No sé mucho sobre historia, no sé mucho sobre antropología …
• El impacto del estrés en la fertilidad de las mujeres

Los investigadores no encontraron evidencia de que el efecto de autoría se debiera a un mayor rigor metodológico en los estudios llevados a cabo por los diseñadores de instrumentos, como una mejor confiabilidad entre evaluadores o una capacitación más estandarizada de evaluadores de instrumentos.

"La credibilidad de los resultados de investigaciones futuras puede cuestionarse en ausencia de medidas para abordar estos problemas", advierten los autores. "Para promover la transparencia en la investigación futura, los autores de herramientas y traductores deben informar rutinariamente sobre su posible conflicto de intereses cuando publiquen investigaciones que investiguen la validez predictiva de su herramienta".

El metanálisis examinó todas las investigaciones publicadas y no publicadas sobre las nueve herramientas de evaluación de riesgos más comúnmente utilizadas en un período de 45 años:

• Histórico, Clínico, Risk Management-20 (HCR-20)
• Inventario de nivel de servicio revisado (LSI-R)
• Lista de verificación de psicopatía revisada (PCL-R)
• Evaluación de Riesgo de Asalto Conyugal (SARA)
• Evaluación Estructurada del Riesgo de Violencia en Jóvenes (SAVRY)
• Guía de Evaluación de Riesgos para Delincuentes Sexuales (SORAG)
• Static-99
• Riesgo de violencia sexual-20 (SVR-20)
• Guía de evaluación del riesgo de violencia (VRAG)

Aunque los investigadores no pudieron descomponer el llamado "sesgo de autoría" por instrumento, el efecto pareció más pronunciado con los instrumentos actuariales que con los instrumentos que utilizaron un juicio profesional estructurado, como el HCR-20. La mayoría de las muestras en el estudio involucraron instrumentos actuariales, siendo los tres más comunes PCL-R, Static-99 y VRAG.

Esta es la última contribución importante del equipo de trabajo de Jay Singh del Molde University College en Noruega y el Departamento de Justicia en Suiza, (fallecido) Martin Grann del Centro para la Prevención de la Violencia del Instituto Karolinska, Estocolmo, Suecia y Seena Fazel de la Universidad de Oxford.

Un objetivo era resolver de una vez por todas una disputa sobre si el efecto de sesgo de autoría es real. El efecto fue reportado por primera vez en 2008 por el equipo de Blair, Marcus y Boccaccini, con respecto a los instrumentos Static-99, VRAG y SORAG. Dos años más tarde, los coautores de dos de esos instrumentos, VRAG y SORAG, respondieron una refutación y cuestionaron el hallazgo del efecto de lealtad. Sin embargo, Singh y sus colegas dicen que la estadística que utilizaron, la curva característica operativa del receptor (AUC), puede no haber cumplido con la tarea y "no proporcionaron ninguna prueba estadística para respaldar sus conclusiones".

El prominente investigador Martin Grann muerto a los 44 años

Tristemente, esta será la última contribución al campo de riesgo de violencia por parte del miembro del equipo Martin Grann, quien acaba de morir a la temprana edad de 44 años. Su muerte es una tragedia para el campo. Escribiendo en la publicación legal Das Juridik , el editor Stefan Wahlberg destacó el "intelecto brillante" de Grann y su "genuino humanismo y curiosidad":

Martin Grann llegó en la última década a ser una de las voces más influyentes en los círculos académicos y en el debate público sobre cuestiones de psiquiatría forense, evaluación de riesgos y peligros de los delincuentes y … tratamiento dentro del sistema penitenciario. Su amplio conocimiento en estas áreas iba desde la ley, por un lado, hasta las terapias clínicas a nivel individual, por el otro, y todo lo demás. Esta semana, también debutará como novelista con el libro "The Nightingale".

El artículo, sesgo de autoría en la evaluación del riesgo de violencia? Una revisión sistemática y metaanálisis , está disponible gratuitamente en línea a través de PloS ONE (AQUÍ).

Informes de blog relacionados:

• Los instrumentos de riesgo de violencia predominan sobre el peligro (2 de agosto de 2012)
• Riesgo de violencia en esquizofrénicos: ¿las herramientas forenses son predictores confiables? (14 de septiembre de 2011)
• Meta-meta de riesgo de violencia: la elección del instrumento sí importa (19 de junio de 2011)
• Psicología plagada de resultados inexactos de investigación (20 de noviembre de 2011)
• Investigadores internacionales de riesgo de violencia lanzan un servicio de noticias gratuito (13 de junio de 2013)