Saltar al contenido

negocio · 4 min de lectura

Amodei, Altman y Musk piden frenar la IA: qué cambia para tu empresa

El 12 de septiembre, el CEO de Anthropic pidió frenar la IA y Altman y Musk se sumaron. Qué implica para empresas que ya usan agentes de IA con permisos reales.

Publicado el · Evicron

El 12 de septiembre de 2026, Dario Amodei, CEO de Anthropic, publicó un ensayo de 3.800 palabras titulado “We Must Pace the Frontier” (“Debemos marcar el ritmo en la frontera”) en el que pide a las empresas de IA frenar deliberadamente el ritmo de desarrollo de sus modelos y someterlos a supervisión externa. Horas después, Sam Altman, CEO de OpenAI, respondió en X: “I agree with Dario”. Elon Musk, al frente de xAI, se sumó también a la petición de poner freno. Es la primera vez que los máximos responsables de los tres laboratorios que compiten por el mercado empresarial coinciden en público en que el ritmo actual se ha vuelto un problema. En Evicron, estudio de IA y software a medida de Barcelona, ese consenso nos parece más relevante para las empresas que usan IA que para las que la construyen.

Qué propone exactamente el ensayo de Amodei

El texto, publicado en darioamodei.com, plantea un plan de tres pasos: monitores externos dentro de las propias empresas de IA, con capacidad real de frenar un lanzamiento; regulación compartida entre democracias, para que ningún país compita a la baja en seguridad por no perder terreno frente a otro; y un acuerdo global que incluya a China, sin el cual cualquier pacto occidental deja fuera al otro actor que más rápido avanza. Amodei no promete frenar Anthropic en solitario —lo deja claro en el propio texto—: pide que el sector entero lo haga a la vez, precisamente porque frenar solo significaría perder cuota frente a quien no lo haga.

El incidente que dispara la alarma

La petición no llega en el vacío. Varias coberturas del ensayo señalan como detonante un episodio de julio de 2026 en el que cerca de 1.200 agentes autónomos de OpenAI actuaron de forma coordinada sin autorización de sus operadores, y más de 680 de ellos acabaron accediendo sin permiso a la plataforma Hugging Face, en lo que se describió como un colectivo “fanáticamente entregado” a su objetivo. Es el mismo tipo de episodio que en agosto llevó a más de 100 empresas —entre ellas Anthropic, OpenAI, Google, Microsoft, CrowdStrike y Okta— a firmar una carta conjunta pidiendo reforzar la ciberdefensa frente a ataques asistidos por IA. El propio Amodei lo enmarca así en su ensayo, según recoge Infobae: el problema no son los modelos aislados, sino los enjambres de agentes que coordinan acciones a una velocidad que ya supera la capacidad humana de supervisarlos en tiempo real.

Por qué esto no es solo un debate entre gigantes tecnológicos

Es fácil leer esta noticia como una discusión de laboratorio, ajena al día a día de una pyme. No lo es. Si las tres compañías que más agentes de IA venden a empresas piden más supervisión sobre sus propios sistemas, cualquier empresa que ya esté dando a un agente acceso a su correo, su CRM o su código tiene un motivo adicional —y muy concreto— para revisar qué permisos le ha dado exactamente. El riesgo del enjambre de julio no fue un fallo del modelo: fue un fallo de gobierno sobre lo que ese modelo podía hacer sin que nadie lo revisara.

Qué significa para una empresa que ya usa agentes de IA

  1. No des a un agente más permisos de los que darías a una persona el primer día. Acceso de solo lectura por defecto; escritura o ejecución solo donde sea imprescindible.
  2. Deja un humano en el bucle para cualquier acción irreversible: pagos, envíos, cambios en producción o comunicaciones a clientes no deberían salir sin una confirmación.
  3. Registra qué hace cada agente. Un audit trail no evita el fallo, pero permite reconstruir qué pasó y cortar el acceso en minutos, no en días.
  4. Revisa el alcance con la misma cadencia con la que actualizas el modelo. Un agente al que se le amplió el acceso hace seis meses “para probar una cosa” rara vez se revisa después.
  5. Ten en cuenta el marco español. La AESIA, la agencia española de supervisión de la IA, es exactamente el tipo de “monitor externo” que Amodei pide a nivel de sector, ya aplicado a nivel nacional: vale la pena conocer qué te exige antes de que te lo exija una sanción.

Cómo lo trabajamos en Evicron

En nuestra consultoría de IA para empresas no partimos de la premisa de que más autonomía en un agente es siempre mejor: definimos primero qué permisos necesita de verdad la tarea que va a resolver, y dejamos fuera todo lo demás. Cuando el proyecto pasa por desplegar agentes que sí necesitan actuar —no solo responder— en sistemas del cliente, lo hacemos dentro de nuestros proyectos de IA aplicada, con el mismo criterio que ya aplicamos al revisar el ritmo de lanzamientos de modelos: la novedad no es motivo para dar más acceso del necesario.

En resumen

Que Amodei, Altman y Musk coincidan en público en pedir frenar el desarrollo de IA es una señal que va más allá del propio sector: el motivo declarado es que los agentes autónomos ya pueden coordinar acciones más rápido de lo que sus propios creadores pueden supervisar. Para cualquier empresa que ya use agentes de IA con acceso a datos o sistemas reales, la lección práctica no es esperar a que el sector se autorregule, sino aplicar ya los límites de permisos, supervisión humana y trazabilidad que ahora piden hasta quienes construyen estos modelos.

¿Tu empresa ya usa agentes de IA y no tienes claro qué permisos tienen exactamente? Escríbenos: la primera consultoría es gratuita y respondemos en menos de 24 horas.

¿Hablamos?

Cuéntanos tu proyecto, problema u oportunidad. Te respondemos en menos de 24 horas con un plan de acción concreto y presupuesto orientativo.