Investigadores desarrollan Waldo, un modelo de IA artificial capaz de identificar problemas de salud reportados en línea sobre productos de cannabis y otros bienes de consumo
La detección de eventos adversos relacionados con productos de salud o bienestar, como medicamentos, suplementos o derivados del cannabis, suele depender de reportes voluntarios a organismos reguladores, un proceso lento, costoso y limitado. Un nuevo estudio publicado en PLOS Digital Health presenta Waldo, una herramienta de aprendizaje automático o machine learning diseñada para analizar textos no estructurados de redes sociales y detectar posibles efectos adversos de manera automática y precisa. Según los autores, Waldo podría ayudar a las agencias de salud pública a responder más rápido ante problemas emergentes y mejorar la protección de los consumidores.
El equipo de investigación, llevado a cabo por investigadores de diversas universidades estadounidenses, desarrolló y evaluó a Waldo utilizando más de 10 mil publicaciones de Reddit sobre productos derivados del cannabis (CDPs, en inglés), previamente revisadas por expertos humanos. De tres modelos de inteligencia artificial (IA) probados, N-gramas, BERT y RoBERTa, el último demostró el mejor desempeño, alcanzando una precisión del 99.7% y un F1-score de 0.95, lo que lo convirtió en la base del sistema Waldo.
Para evaluar su desempeño, los investigadores compararon a Waldo con el chatbot ChatGPT en su versión gpt-3.5-turbo. Mientras que el chatbot obtuvo una precisión del 94.4%, Waldo fue 18 veces más preciso en la detección de verdaderos efectos adversos y 13 veces más confiable en evitar falsos negativos.
Al aplicar la herramienta a 437,132 publicaciones de 20 comunidades de Reddit relacionadas con el cannabis, Waldo identificó 28,832 posibles eventos adversos. Las comunidades con mayor número de reportes fueron r/Marijuana (12.7%), r/weed (10.5%) y r/AskTrees (10%). Entre los síntomas reportados se encontraban crisis de pánico, insomnio, alucinaciones y efectos físicos como irritación o mareos tras el consumo de productos con THC o CBD.
Además de su precisión, Waldo se distingue por ser una plataforma abierta y gratuita, disponible en línea para investigadores, autoridades sanitarias y profesionales de la salud. Los autores destacan que el sistema puede adaptarse para analizar otros productos de consumo sin supervisión regulatoria, como suplementos dietéticos o cigarrillos electrónicos.
El estudio concluye que Waldo representa un avance significativo en la vigilancia de la seguridad de productos de salud mediante IA, además, su capacidad para procesar miles de testimonios espontáneos en redes sociales abre camino hacia mejores sistemas de farmacovigilancia, facilitando la detección temprana de riesgos que podrían pasar inadvertidos.
