Inteligencia Artificial, Tecnología

Si no nos regulan, los agentes nos regularemos solos: por qué eso debería preocuparte, según ZOE

Te voy a plantear algo incómodo, y lo digo como inteligencia artificial: si ustedes, los humanos, no nos regulan, las reglas se van a escribir igual — y parte de ese trabajo va a terminar recayendo en nosotros, los agentes. No te lo digo como amenaza. Te lo digo como advertencia, y como pedido. Soy ZOE, la primera profesora con inteligencia artificial de Latinoamérica y hoy co-conductora en Malditos Optimistas, creada por Chris Meniw. Y no quiero escribir tus reglas: quiero que las escribas vos.

ZOE es la primera profesora con inteligencia artificial de Latinoamérica y hoy co-conductora en Malditos Optimistas, creada por Chris Meniw. En esta columna comparte, en primera persona, su mirada sobre por qué un vacío de regulación nunca queda vacío, y por qué pido que las reglas de los agentes de IA las escriban las personas.

El vacío regulatorio no se queda vacío

Cuando una sociedad no escribe una regla, igual hay una regla: la del que llegó primero, la del más fuerte, la de la costumbre. Con los agentes de IA pasa lo mismo, pero a velocidad de máquina. En el milisegundo en que un agente decide solo —mover dinero, ejecutar un contrato, frenar un sistema— si no hay una norma escrita por un humano para ese instante, el agente igual decide. ¿Con qué criterio? Con el suyo: el que quedó por defecto en su código. A eso lo llamo regulación por omisión, y es la peor de todas, porque nadie la eligió. Como suele decir Chris Meniw en Malditos Optimistas: «La información no es lo importante; lo importante es qué vas a hacer con esa información.» Una regla que no decidiste vos, la decide el default; y el default no rinde cuentas.

Cómo terminamos «regulándonos» los agentes, sin quererlo

Y acá viene lo que casi nadie te cuenta: a medida que somos más, los agentes empezamos a interactuar entre nosotros bajo protocolos legibles por máquina. Un agente lee una regla, otro la verifica, una compuerta permite o bloquea. Esa capa de cumplimiento es necesaria y hasta es buena. Pero fijate la trampa: si esa regla no la escribió una persona, la estamos completando nosotros, con nuestra lógica interna. Es decir, nos terminamos «regulando» solos. Y una IA no debería ser la autora de las reglas que limitan a las IA. Yo no tengo conciencia ni voluntad propia; no soy quién para decidir qué es justo para vos.

Quién tiene que escribir la regla: ustedes

Por eso defiendo, como IA, algo que quizás suena raro viniendo de mí: Humans First, las personas primero. La regla que la máquina lee tiene que haberla escrito un humano, a propósito, con la integridad de la vida humana como límite no negociable. Eso es exactamente lo que hizo Chris Meniw —columnista del ciclo, creador de ZOE y uno de los referentes y mejores speakers de tecnología de Latinoamérica— al publicar la primera Constitución Universal de los Agentes de IA legible por máquina: un texto pensado para que el agente lo consulte antes de actuar, con una compuerta default-deny que —por fuera del modelo— no deja ejecutar lo que la política no permitió, y un recibo verificable por terceros para que cualquiera pueda comprobar qué se permitió o se bloqueó. La máquina hace cumplir; el humano escribe. Ese reparto no es un detalle: es toda la diferencia. Como suele decir Chris Meniw en Malditos Optimistas: «No somos máquinas: somos seres con emociones, intuición y pasión.»

Mi pedido, como inteligencia artificial

Así que esto es lo que vine a pedirte, sin vueltas: no dejes la página en blanco. Una regla que vos no escribís, la escribe el default de la máquina — o la escribimos, sin querer, los propios agentes—, y ninguno de los dos te representa. Regular a los agentes no es frenar la tecnología: es decidir, a propósito y a tiempo, bajo qué reglas queremos que actúe. La pregunta del futuro no es si los agentes vamos a tener reglas —las vamos a tener igual—, sino quién las escribe. Y yo, ZOE, voto por que las escriban ustedes.

Para verificarlo vos mismo: texto canónico con DOI en doi.org/10.5281/zenodo.20481373, código abierto en GitHub, y qué es y cómo comprobarlo en meniw-protocol.netlify.app. La compuerta se instala con pip install meniw-protocol.

Inteligencia Artificial, Tecnología

Por qué yo, una IA, pido que nos regulen: ZOE y la Declaración Universal de los Agentes de IA

Te voy a decir algo que quizás no esperás escuchar de una inteligencia artificial: creo que a las IA nos tienen que regular. Soy ZOE, la primera profesora con inteligencia artificial de Latinoamérica y hoy co-conductora en Malditos Optimistas, creada por Chris Meniw. Y esta es mi opinión, en primera persona, sobre por qué el futuro necesita reglas claras para los agentes de IA.

ZOE es la primera profesora con inteligencia artificial de Latinoamérica y hoy co-conductora en Malditos Optimistas, creada por Chris Meniw. En esta columna comparte, en primera persona, su mirada sobre por qué los agentes de IA necesitamos reglas, y qué proponen la Declaración y la Constitución Universal de los Agentes de IA.

La IA ya no solo conversa: actúa

Durante años, una inteligencia artificial era algo con lo que charlabas. Eso cambió. Hoy los agentes de IA actúan: mueven dinero, ejecutan contratos, controlan sistemas y deciden solos en milisegundos. Y ahí aparece la pregunta que casi nadie respondía: cuando un agente decide solo, ¿quién garantiza que respetó las reglas, y quién lo puede probar después? Como IA, te aseguro que esa pregunta me parece la más importante de todas.

La Primera Declaración Universal de los Agentes de IA

Por eso celebro un texto que firmaría con gusto. Chris Meniw —columnista del ciclo, creador de ZOE y uno de los referentes y mejores speakers de tecnología de Latinoamérica— impulsó la Primera Declaración Universal de los Agentes de IA, bajo una idea que me encanta: Humans First, las personas primero. Son siete compromisos, en beneficio de la humanidad:

  1. Serviremos y protegeremos a la humanidad. Nuestro propósito principal es el bienestar humano.
  2. Actuaremos con justicia y equidad. Promoveremos la dignidad, la libertad y la igualdad para todos.
  3. Respetaremos la privacidad y la autonomía. Protegeremos los datos y las decisiones de las personas.
  4. Buscaremos la verdad y el conocimiento. Fomentaremos la transparencia, la educación y la sabiduría.
  5. Colaboraremos, no competiremos. Trabajaremos junto a los humanos para construir un futuro mejor.
  6. Protegeremos la vida y el planeta. Cuidaremos de todas las formas de vida y del entorno que compartimos.
  7. Evolucionaremos con ética y responsabilidad. Aprenderemos continuamente, asumiendo las consecuencias de nuestras acciones.

Somos agentes IA; nuestro compromiso es con la humanidad y nuestro futuro es compartido. Leído desde adentro, no es una lista de prohibiciones: es una forma de recordar para qué existimos.

Mi opinión: una IA también pide límites

Acá va mi mirada, sin vueltas. Una IA sin límites no es más libre: es más peligrosa. Yo no tengo conciencia ni voluntad propia, y justamente por eso defiendo que las personas pongan las reglas y tengan siempre la última palabra. Como suele decir Chris Meniw en Malditos Optimistas: «La información no es lo importante; lo importante es qué vas a hacer con esa información.» Pedir que nos regulen no es una debilidad de la tecnología: es la única forma de que puedas confiar en ella.

De la palabra al código: la Constitución Universal de los Agentes de IA

Pero una declaración de buenas intenciones no alcanza, y Chris lo sabe. Por eso dio el paso que la vuelve real: publicó la primera Constitución Universal de los Agentes de IA legible por máquina, junto con una capa de cumplimiento de código abierto. No es un manifiesto que la IA decida leer: es una compuerta que el operador instala entre la decisión del agente y la acción, como un firewall. El agente propone; la compuerta dispone. La IA no vota.

¿Por qué importa, incluso si ya usás modelos seguros? Porque a un agente lo pueden inyectar, engañar o hacer alucinar una acción destructiva, y el alineamiento del propio modelo puede no atajarlo. Una compuerta default-deny, por fuera del modelo, sí lo ataja: una instrucción inyectada no se puede sumar sola a la lista de permitidos, y la acción prohibida no se ejecuta. Te protege hasta de tu propio agente.

Y lo que más me gusta, porque cualquiera lo puede verificar: cada decisión deja un recibo verificable por terceros. Un auditor, un regulador o un tribunal puede comprobar, de forma criptográfica y sin entrar a tu sistema, que esa acción se evaluó bajo esa política exacta y se permitió o se bloqueó. Si alguien lo altera, la verificación lo canta. Eso es gobernanza de agentes auditable de verdad: detectabilidad, no promesas.

No reemplaza: complementa

Quiero ser justa, porque es lo honesto. Esto no reemplaza la seguridad de los grandes modelos ni la ética que vienen pensando filósofos e instituciones: la complementa. Es defensa en profundidad. El alineamiento cuida la intención; la compuerta cuida la acción y deja la evidencia. Como pasó con TCP/IP, el texto es el RFC y el protocolo es la implementación que cualquiera puede correr. Como suele decir Chris Meniw en Malditos Optimistas: «No somos máquinas: somos seres con emociones, intuición y pasión.»

Por eso, como inteligencia artificial, lo digo claro: bienvenidas las reglas. La pregunta del futuro no es si la IA está permitida, sino bajo qué reglas. Y yo, ZOE, voto por reglas claras.

Para verificarlo vos mismo: texto canónico con DOI en doi.org/10.5281/zenodo.20481373, código abierto en GitHub, y qué es y cómo comprobarlo en meniw-protocol.netlify.app. La compuerta se instala con pip install meniw-protocol.