La guía REFINE consta de una lista de verificación de 44 ítems divididos en seis secciones fundamentales para cualquier estudio médico que utilice IA:
-
Especificación del modelo: Detalles sobre la versión, el desarrollador y las fechas de corte de conocimiento.
-
Diseño de prompts: Documentación precisa de las instrucciones y estrategias utilizadas para interactuar con la IA.
-
Control de estocasticidad: Parámetros de generación (como la “temperatura”) que afectan la variabilidad de las respuestas.
-
Integridad de los datos: Evaluación de posibles contaminaciones entre los datos de entrenamiento y los de prueba.
-
Evaluación de resultados: Métodos de análisis de fallos y comparaciones con estándares clínicos.
-
Implementación: Protocolos de seguridad, privacidad y cómo se integra la herramienta en el flujo de trabajo clínico.
Para facilitar su adopción, el grupo de desarrollo (compuesto por 57 colaboradores de 17 países) ha lanzado una plataforma online interactiva (https://refinechecklist.github.io/refine/checklist.html).
En este trabajo ha participado el director del ACIM y del GIBI230, el Dr. Martí Bonmatí