Líderes de opinión

Cuando su IA inventa hechos: El riesgo empresarial que ningún líder puede ignorar

mm
Añade Unite.AI a tus fuentes preferidas en Google

Suena bien. Parece bien. Está mal. Eso es su IA en alucinación. El problema no es solo que los modelos de IA generativos de hoy alucinan. Es que sentimos que si construimos suficientes barreras de seguridad, lo afinamos, lo sometemos a RAG y lo domesticamos de alguna manera, entonces podremos adoptarlo a escala empresarial.

Estudio Dominio Tasa de alucinación Hallazgos clave
Stanford HAI & RegLab (Ene 2024) Legal 69%–88% Los LLM exhibieron altas tasas de alucinación al responder a consultas legales, a menudo careciendo de autoconciencia sobre sus errores y reforzando suposiciones legales incorrectas.
Estudio JMIR (2024) Referencias académicas GPT-3.5: 90.6%, GPT-4: 86.6%, Bard: 100% Las referencias generadas por LLM a menudo fueron irrelevantes, incorrectas o no respaldadas por la literatura disponible.
Estudio del Reino Unido sobre contenido generado por IA (Feb 2025) Finanzas No especificado La desinformación generada por IA aumentó el riesgo de corridas bancarias, con una parte significativa de los clientes de los bancos considerando trasladar su dinero después de ver contenido falso generado por IA.
Informe de Riesgos Globales del Foro Económico Mundial (2025) Evaluación de riesgos globales No especificado La desinformación y la mala información, amplificadas por IA, se clasificaron como el principal riesgo global en un plazo de dos años.
Tabla de clasificación de alucinaciones de Vectara (2025) Evaluación de modelos de IA GPT-4.5-Preview: 1.2%, Google Gemini-2.0-Pro-Exp: 0.8%, Vectara Mockingbird-2-Echo: 0.9% Se evaluaron las tasas de alucinación en varios LLM, revelando diferencias significativas en el rendimiento y la precisión.
Estudio de Arxiv sobre alucinación de hechos (2024) Investigación de IA No especificado Se presentó HaluEval 2.0 para estudiar y detectar sistemáticamente alucinaciones en LLM, centrándose en inexactitudes factuales.

Las tasas de alucinación van desde el 0,8% hasta el 88%

Sí, depende del modelo, dominio, caso de uso y contexto, pero esa dispersión debería alarmar a cualquier tomador de decisiones empresariales. Estos no son errores de casos límite. Son sistémicos. ¿Cómo toma la decisión correcta cuando se trata de la adopción de IA en su empresa? ¿Dónde, cómo, cuánto, cuán ancho?

Y ejemplos de consecuencias reales de esto aparecen en su noticias todos los días. El Consejo de Estabilidad Financiera del G20 ha señalado a la IA generativa como un vector de desinformación que podría causar crisis de mercado, inestabilidad política y peor, crisis bancarias, noticias falsas y fraude. En otra historia recientemente informada, el bufete de abogados Morgan & Morgan emitió un memorándum de emergencia a todos los abogados: No presenten informes generados por IA sin verificar. La ley de casos falsos es un delito “despido”.

Esto puede no ser el mejor momento para apostar a que las tasas de alucinación tiendan a cero pronto. Especialmente en industrias reguladas, como la legal, las ciencias de la vida, los mercados de capital o en otras, donde el costo de un error podría ser alto, incluyendo la publicación de educación superior.

La alucinación no es un error de redondeo

Esto no se trata de una respuesta incorrecta ocasional. Se trata de riesgo: Reputacional, Legal, Operativo.

La IA generativa no es un motor de razonamiento. Es un finalizador estadístico, un loro estocástico. Completa su prompt de la manera más probable según los datos de entrenamiento. Incluso las partes que suenan verdaderas son suposiciones. Llamamos a las piezas más absurdas “alucinaciones”, pero toda la salida es una alucinación. Una bien estilizada. Sin embargo, funciona, mágicamente bien, hasta que no lo hace.

IA como infraestructura

Y sin embargo, es importante decir que la IA estará lista para la adopción empresarial cuando comencemos a tratarla como infraestructura, y no como magia. Y donde se requiera, debe ser transparente, explicable y rastreable. Y si no lo es, entonces simplemente no está lista para la adopción empresarial para esos casos de uso. Si la IA toma decisiones, debería estar en el radar de su junta directiva.

La Ley de IA de la UE está liderando el cargo aquí. Los dominios de alto riesgo como la justicia, la atención médica y la infraestructura serán regulados como sistemas de misión crítica. La documentación, las pruebas y la explicabilidad serán obligatorias.

Qué hacen los modelos de IA seguros para empresas

Las empresas que se especializan en construir modelos de IA seguros para empresas toman una decisión consciente de construir la IA de manera diferente. En sus arquitecturas de IA alternativas, los Modelos de Lenguaje no se entrenan con datos, por lo que no se “contaminan” con nada indeseable en los datos, como sesgo, infracción de propiedad intelectual o la tendencia a adivinar o alucinar.

Esos modelos no “completan su pensamiento” — razonan a partir del contenido del usuario. Su base de conocimientos. Sus documentos. Sus datos. Si la respuesta no está allí, estos modelos lo dicen. Eso es lo que hace que estos modelos de IA sean explicables, rastreables, deterministas y una buena opción en lugares donde las alucinaciones son inaceptables.

Un libro de juego de 5 pasos para la responsabilidad de la IA

  1. Mapa del paisaje de la IA – ¿Dónde se utiliza la IA en su negocio? ¿Qué decisiones están influyendo? ¿Qué prima coloca en la capacidad de rastrear esas decisiones hasta un análisis transparente sobre material de origen confiable?
  2. Alinear su organización – Dependiendo del alcance de su despliegue de IA, configure roles, comités, procesos y prácticas de auditoría tan rigurosas como las de riesgos financieros o de ciberseguridad.
  3. Llevar la IA al nivel de riesgo de la junta directiva – Si la IA de su empresa habla con clientes o reguladores, pertenece a sus informes de riesgos. La gobernanza no es un espectáculo secundario.
  4. Tratar a los proveedores como corresponsables – Si la IA de su proveedor inventa cosas, usted todavía es dueño del desastre. Extienda sus principios de responsabilidad de la IA a ellos. Exija documentación, derechos de auditoría y SLA para explicabilidad y tasas de alucinación.
  5. Entrenar escepticismo – Su equipo debería tratar la IA como un analista junior — útil, pero no infalible. Celebre cuando alguien identifica una alucinación. La confianza debe ganarse.

El futuro de la IA en la empresa no son modelos más grandes. Lo que se necesita es más precisión, más transparencia, más confianza y más responsabilidad.

Joy Dasgupta es CEO de Gyan y un líder experimentado en soluciones impulsadas por IA con más de dos décadas de experiencia en liderazgo global en empresas como Hewlett-Packard, American Express y Genpact.

Gyan es una arquitectura de IA fundamentalmente nueva diseñada para empresas con baja o cera tolerancia a alucinaciones, riesgos de propiedad intelectual o modelos voraces de energía. Donde la confianza, la precisión y la rendición de cuentas son importantes, Gyan garantiza que cada idea sea explicable, rastreable a fuentes confiables, con privacidad de datos completa en su núcleo.