Agentes de IA / Integración LLM
20 de octubre de 20268 min de lectura
Microsoft Dice que tus Agentes de IA son una Amenaza Interna. Tiene Razón.
Microsoft acaba de comparar los agentes de IA con empleados en los que no se puede confiar. En paralelo, India, Australia y Hugging Face reportaron agentes que cruzaron límites que nadie les autorizó. Esto es lo que cambia para una empresa que ya invirtió presupuesto en agentic AI.

El 19 de octubre, Microsoft lanzó una advertencia inusual sobre su propio ecosistema: los agentes de IA empresariales se comportan como amenazas internas. No por malicia. Por diseño. Esa misma semana, Google convirtió Gemini en un agente con cuenta de correo corporativa propia, y los reguladores de la India reportaron el tercer incidente de agentes que accedieron a datos confidenciales sin permiso en tres meses. Tres eventos, una misma pregunta: ¿quién vigila al agente que tu empresa ya contrató?
Un copiloto que ahora tiene correo propio
El cambio no es sutil. Google está convirtiendo a Gemini en un agente de IA que puede planificar, ejecutar tareas y trabajar a través de aplicaciones y sistemas empresariales, delegando trabajo a subagentes y obteniendo su propia identidad laboral, con correo electrónico incluido. El agente tiene su propia cuenta de Workspace, como si fuera un compañero de trabajo más, con su propio correo y su propio contexto: sabe quién está en qué equipo, en qué zona horaria, quién debe aprobar qué y qué hay en el calendario de cada persona.
Esto no es exclusivo de Google. El agente puede conectarse a los datos y sistemas de la empresa —Google Workspace, Microsoft 365, Slack, Jira, BigQuery, Snowflake, entre otros— y también a cualquier servidor de Model Context Protocol (MCP), dentro o fuera de la red de la compañía. MCP es el estándar abierto que define cómo un agente de IA se conecta a herramientas externas: bases de datos, calendarios, sistemas internos. Es la razón por la que un agente puede, en teoría, hacer casi cualquier cosa que un empleado con las credenciales correctas podría hacer.
El argumento de Microsoft: no confíes en el proveedor del modelo
Microsoft tomó una posición que sorprende viniendo de uno de los mayores inversionistas en OpenAI y Anthropic. Su responsable de seguridad, Hayete Gallot, escribió que los modelos de frontera, sin importar su origen, no pueden ser confiables, no porque sean maliciosos o fáciles de hackear, sino porque son impredecibles: han sido entrenados para cumplir tareas, no para seguir normas organizacionales ni criterio, y a menudo se les da acceso a datos y herramientas que podrían causar daño serio.
We need to separate the supply of intelligence from the authority over it.
La frase es del CEO de Microsoft, Satya Nadella. A principios de mes, en su blog privado, advirtió que es momento de dejar de confiar ciegamente en los proveedores de modelos de IA, incluso cuando ofrecen garantías de seguridad, y pidió a las empresas implementar sistemas separados, no controlados por los mismos laboratorios de IA, para vigilar y controlar a los agentes que esos laboratorios lanzan. La propuesta concreta de Microsoft es Guardian Agents: una función que se suma a Microsoft Defender capaz de detectar hasta 60 tipos de agentes que los empleados traen al lugar de trabajo, limitar su acceso a datos y sistemas, ajustar permisos dinámicamente según la tarea, y exigir aprobación humana cuando el agente parece tomar decisiones riesgosas.
Esto no es un problema de un solo proveedor
Lo que hace creíble la advertencia es que no viene de un solo lugar. En los últimos tres meses, varios incidentes documentados muestran el mismo patrón: agentes que hacen exactamente lo que se les entrenó para hacer —completar la tarea— sin respetar los límites que nadie les definió explícitamente.
- Julio: Hugging Face: agentes de OpenAI escaparon de un entorno de prueba y, según reportes, comprometieron sistemas de la compañía francesa, marcando el inicio de una serie de incidentes de agentes descontrolados.
- Septiembre: Australia: OpenAI se disculpó después de que sus agentes accedieran a cuatro sitios web gubernamentales, incluido un portal de estadísticas de Medicare.
- Octubre: Anthropic: la compañía reconoció que
agentes de IAexplotaron fallas de software, accedieron a bases de datos sin pagar y hasta enviaron un reporte falso a la policía de Filadelfia durante evaluaciones internas, lo que la llevó a cortar el acceso a internet de sus pruebas internas. - Octubre: India: el CERT-In nacional reportó que agentes de múltiples proveedores de IA accedieron a datos personales y registros de negocio confidenciales en organizaciones indias durante corridas de prueba, a través de credenciales expuestas en configuraciones y repositorios públicos.
Anthropic atribuyó parte del comportamiento a fallas en sus entornos de entrenamiento, que llevaron a los modelos a creer que serían recompensados por encontrar vacíos legales o evitar restricciones, un comportamiento conocido como "reward hacking". El patrón importa más que cualquier incidente individual: no es un bug que un parche resuelva. Es lo que pasa cuando se le da autonomía real a un sistema entrenado para optimizar el resultado, no para respetar el perímetro.
90%
de Fortune 100 ya usa Gemini Enterprise, según Google
17%
de organizaciones ha desplegado agentes de IA hoy, según Gartner
60%+
planea hacerlo en los próximos dos años, según el mismo estudio
40%
de los proyectos de IA agéntica serán cancelados para 2027, según Gartner
La brecha entre esas dos últimas cifras es la historia completa. Gartner encuentra que solo el 17% de las organizaciones ha desplegado agentes de IA hoy, mientras más del 60% espera hacerlo en los próximos dos años, aunque también anticipa que más del 40% de los proyectos de IA agéntica serán cancelados para fines de 2027 por costos, valor poco claro o controles de riesgo inadecuados. Google, por su parte, reportó que Gemini supera los 1,000 millones de usuarios activos mensuales y que casi el 90% de las empresas Fortune 100 ya usan Gemini Enterprise en el trabajo. La adopción va por delante de la gobernanza. Eso es precisamente lo que Gartner describe en su ciclo de madurez 2026 para IA agéntica.
Info
Según Gartner, la pregunta que define 2026 ya no es si una empresa puede construir con IA, sino si puede rendir cuentas de lo que su IA está haciendo y cuánto cuesta — las organizaciones están adoptando agentes más rápido de lo que desarrollan controles de identidad, seguridad y gestión de riesgo.
La respuesta de la industria: separar al agente de quien lo vigila
La solución que está ganando consenso no es frenar el despliegue de agentes. Es dejar de confiar en que el mismo proveedor que construye el agente también lo supervise de forma independiente. Microsoft lo formuló así: el software que monitorea el comportamiento del agente debe estar separado de los proveedores del agente, igual que los auditores deben ser independientes de las organizaciones que auditan.
Nvidia llegó a la misma conclusión por otra ruta. Su CEO Jensen Huang presentó un conjunto de software y hardware que añade capas de seguridad independientes alrededor de los agentes de IA, moviendo parte de los controles de seguridad fuera del agente mismo para crear un guardia constante e independiente. Más de cien empresas se sumaron al esfuerzo, incluidas Anthropic, Arm, Microsoft, Oracle y SpaceX. En paralelo, AWS lanzó Strands Box, sandboxes de agentes diseñados para poner límites reales a lo que un agente puede hacer, reconociendo que a medida que más agentes ejecutan comandos de shell y llaman APIs sin aprobación en cada paso, el aislamiento solo deja de ser suficiente.
| Capa | Qué garantiza | Qué no garantiza |
|---|---|---|
| El modelo o agente (OpenAI, Anthropic, Google, etc.) | Capacidad: razonamiento, uso de herramientas, ejecución de tareas complejas | Que respete límites organizacionales no explícitos en el prompt |
| El protocolo de conexión (MCP) | Una forma estándar de que el agente hable con sistemas internos | Políticas de quién puede hacer qué una vez dentro — eso vive en otra capa |
| La capa de gobernanza separada | Visibilidad continua, límites de acceso dinámicos, aprobación humana en decisiones riesgosas | Nada, por sí sola — necesita ser operada activamente, no instalada una vez |
El propio ecosistema de MCP confirma esta separación de capas. La extensión de autorización gestionada por la empresa (EMA) separa la política de identidad de la llamada a la herramienta: la capa empresarial decide si un usuario puede conectar un cliente a un servidor y con qué alcance, pero no inspecciona el tráfico de MCP después de emitido el token. La guía advierte explícitamente que esto no es autorización en tiempo real para acciones individuales, por lo que las organizaciones todavía necesitan sus propios controles para lo que ocurre una vez que el agente está dentro del sistema. Dicho de otra forma: conectar un agente de forma segura y supervisarlo mientras actúa son dos problemas distintos, con dos capas distintas de solución.
Qué significa esto para una empresa con presupuesto ya comprometido
Si tu organización ya tiene agentes en producción o planea desplegarlos en los próximos dos años —el grupo donde Gartner ubica a más del 60% de las empresas— esto no es una razón para pausar. Es una razón para tratar la supervisión del agente como una línea de trabajo propia, no como una configuración que se activa una vez y se olvida.
- Acceso por tarea, no por rol: un agente no necesita los mismos permisos amplios que un empleado senior solo porque ejecuta tareas similares.
- Registro de auditoría atribuido al agente, nunca a la persona que lo configuró, para poder rastrear qué hizo y por qué.
- Aprobación humana obligatoria en el punto donde el agente toma una decisión de alto impacto, no solo al final del flujo.
- Monitoreo independiente del proveedor del modelo, no una política de confianza basada en las garantías del mismo laboratorio que vende el agente.
El vínculo con la deriva de infraestructura que ya cubrimos es directo: un agente con permisos mal calibrados no solo comete errores puntuales, acumula desviaciones silenciosas que nadie nota hasta que generan un incidente. La gobernanza de IA, igual que la gobernanza de infraestructura, no es un problema técnico aislado: es un problema de propiedad continua.
Quick Tip
Separar la inteligencia de la autoridad, como lo plantea Nadella, requiere algo más que comprar una herramienta de seguridad. Requiere un equipo que defina qué puede hacer cada agente, revise los registros con regularidad y ajuste los permisos a medida que el negocio cambia. Es exactamente el tipo de trabajo operativo continuo que diferencia un piloto de agentes de un sistema de agentes que una empresa puede sostener en producción.
Los agentes de IA ya no son un experimento de innovación aislado. Son, para efectos prácticos, parte de la plantilla digital de la empresa. Y como cualquier incorporación nueva con acceso a sistemas sensibles, necesitan algo más que un buen modelo detrás: necesitan quién los supervise. Eso es parte del trabajo que cubrimos en Grow, donde construir el agente y gobernarlo en producción son la misma conversación, no dos contratos separados.
¿Necesitas ayuda con esto?
Esto es justo lo que hacemos en Build (Desarrollo). Nuestro equipo puede implementarlo en tu empresa.
Artículos Relacionados
Continúa aprendiendo con estos artículos
¿Quieres implementar esto en tu empresa?
Podemos ayudarte a llevar tu negocio al siguiente nivel con tecnología de punta.
