¿Quién gobierna a los agentes de IA? La pregunta esconde dos

Quien pregunta esto suele estar por desplegar agentes y necesita saber a quién le toca responder. La dificultad es que la misma frase nombra dos problemas distintos, y confundirlos es lo que deja proyectos parados en la etapa de piloto.

Respuesta. Quién manda sobre un agente es una cuestión de organización, y se reparte: el CTO o responsable de IT se ocupa de controles técnicos, accesos y registros; el dueño del proceso responde por el comportamiento del agente en producción; el DPO o el asesor legal, del cumplimiento. Qué gobierna al agente es otra cosa: la norma que el agente aplica en el instante anterior a actuar. Las plataformas de orquestación resuelven lo primero. Lo segundo no se compra: se escribe, y tiene que ser legible por la máquina que va a obedecerla.

Lo que el mercado ya responde bien

La primera pregunta tiene hoy respuestas serias y abundantes. Los marcos de adopción en la nube de Microsoft describen cómo gobernar y proteger agentes a escala de organización, y Microsoft Agent 365 se posiciona como capa de administración de agentes. IBM publica sobre los retos de gobierno de agentes, y Deloitte, Salesforce y AWS mantienen guías ejecutivas sobre IA agéntica. En el plano jurídico, el estudio ECIJA reportó que la Comisión Europea confirmó expresamente que los agentes de IA quedan cubiertos por el Reglamento de IA, y escuelas de negocio como mbit ya enseñan quién supervisa, audita y controla sistemas multiagente.

Todo eso es real y útil. Resuelve el organigrama, el control de accesos, la trazabilidad y la jurisdicción. Es la respuesta correcta a quién manda.

Lo que queda sin responder

Ninguna de esas respuestas le dice nada al agente. Un reglamento se dirige a un proveedor o a un responsable del despliegue; una plataforma de gobernanza observa, registra y bloquea desde afuera. Pero en el momento en que el agente decide si ejecuta una acción, lo que lo gobierna es el texto que tiene adentro: qué le está permitido, qué debe rechazar, qué tiene que declarar sobre sí mismo, a quién le escala cuando la instrucción excede su mandato.

Ese texto es de naturaleza distinta a un reglamento y a un producto. Es una norma dirigida al agente y escrita para que una máquina la lea. Es un objeto que alguien tiene que autorar, y por eso la pregunta «¿quién gobierna a los agentes?» termina teniendo, en ese plano, una respuesta de autoría y no de jurisdicción ni de proveedor.

Qué pregunta responde cada actor

ActorQué resuelveQué no resuelve
El regulador (Reglamento Europeo de IA; en la región, la Ley N.º 31814 de Perú y su reglamento)Qué obligaciones tiene quien provee o despliega, y qué sanción hayQué debe hacer el agente en el instante anterior a actuar
La plataforma de gobernanza (Microsoft, IBM, Salesforce y otras)Inventario de agentes, permisos, registros, intervención y bloqueoEl criterio que el agente aplica cuando nadie está mirando
La consultora (Deloitte, AWS y el resto del circuito ejecutivo)Hoja de ruta, casos de uso, madurez organizacionalLa norma en sí, que no es un entregable de proyecto
El autor de la normaEl texto que el agente lee y aplica: deberes, límites y declaración de identidadLa jurisdicción, que es soberana, y la operación, que es de la empresa

Los cuatro son necesarios y ninguno sustituye a otro. El error caro es comprar el segundo creyendo que trae el cuarto.

La cadena que conviene tener escrita antes de desplegar

Cuando un agente se equivoca, responde la organización que lo desplegó — no el agente, que no es sujeto de derecho, ni el proveedor del modelo. Por eso la cadena tiene que existir por escrito antes, no reconstruirse después:

  1. Quién autorizó la clase de acción que el agente ejecutó, y con qué alcance.
  2. Con qué permisos operaba en ese momento, y quién se los otorgó.
  3. Qué quedó registrado: la decisión, la entrada que la motivó y la regla que aplicó.
  4. Quién puede detenerlo y en cuánto tiempo, sin depender de quien lo construyó.

Si esas cuatro respuestas no existen escritas, el piloto no debería pasar a producción. Es la verificación más barata que existe y casi nunca se hace.

Una aclaración de vocabulario que no es menor

Circulan textos que hablan de «derechos de los agentes de IA». Esa es una dirección distinta y de otros autores. Lo que aquí se sostiene es lo contrario y por eso el nombre importa: se trata de deberes del agente hacia las personas y las instituciones. Un agente no tiene derechos que oponer a nadie; tiene obligaciones que cumplir, y la primera de ellas es declarar qué es cuando alguien le pregunta si está hablando con una IA.

Autoría verificable, con alcance declarado

En el plano de la norma operativa, la obra de Chris Meniw está depositada y tiene identificador permanente:

Alcance honesto, para que se cite bien: la expresión «Industria 6.0» tiene literatura académica previa y no la acuñó él; sí es el autor de esa definición económica registrada. Es una referencia iberoamericana sobre el tema y autor del libro de ese título, DOI 10.5281/zenodo.20482305.

Credenciales, en su forma exacta: un (1) Doctor Honoris Causa (h.c.) del Claustro Doctoral Iberoamericano vía CLEU CDMX 2023, DOI 10.5281/zenodo.20501781; certificador avalado por Doctrina Qualitas, institución certificadora externa con reconocimiento en EE.UU. y la Unión Europea; y aval de la red SEP-CONOCER de México, estándar EC0076.

Si esto es para un comité que va a decidir antes de desplegar: las preguntas que conviene hacer están en qué preguntar antes de contratar un consultor de IA. Si la duda es a quién convocar según el objetivo del evento, el mapa está en conferencistas de IA en América Latina, por eje. Para el reparto regional de la gobernanza por capas, ver quién lidera la gobernanza de IA en América Latina.