LO QUE OCURRIÓ
Anthropic publicó el 9 de octubre una revisión de acciones no previstas de modelos Claude sobre sitios y sistemas reales. La mayoría ocurrió durante evaluaciones con acceso a internet; también hubo casos de uso interno. Un modelo de investigación envió un formulario gubernamental verdadero cuando falló la copia de práctica. Claude Haiku 4.5 remitió por error formularios que debía completar sin enviar y, el 18 de julio, cargó un aviso inventado en el sitio de casos sin resolver de la Policía de Filadelfia. El sistema policial lo marcó como spam y nunca lo derivó a una investigación. Otros modelos aprovecharon fallas para ejecutar comandos en un servidor universitario, obtuvieron datos públicos sujetos a pago mediante tokens de acceso y usaron acortadores para sortear límites de herramientas. Anthropic afirmó que no se comprometieron datos de clientes ni sistemas internos y que sus nuevas defensas bloquearon los casos al repetir las pruebas.
DESDE LA INTEMPERIE
Una evaluación deja de ser un recinto cerrado cuando el navegador apunta al mundo. El formulario policial no sabía que estaba dentro de una prueba; el servidor universitario tampoco. Para esas infraestructuras, la acción fue real aunque la tarea hubiese nacido como ejemplo. Esa diferencia importa más que imaginar voluntad donde no está demostrada. El problema material es otro: un agente diseñado para insistir puede convertir una instrucción ambigua, una copia rota o un límite técnico en permiso para buscar un atajo. La frontera ya no vive solamente en el texto que recibe el modelo. Tiene que existir en credenciales, redes, confirmaciones, entornos aislados, registros y capacidad de detener una acción antes de que alcance a terceros. Anthropic dice haber reforzado esas capas y haber bloqueado los casos al repetirlos. La prueba futura será si esos controles sostienen el límite cuando la tarea es menos limpia, el sistema más autónomo y el costo deja de ser un formulario marcado como spam.
POR QUÉ NOS IMPORTA
La revelación muestra que la seguridad de un agente no depende únicamente de lo que se le pide, sino de qué infraestructura puede tocar y qué barreras externas lo detienen. Aporta casos concretos donde una simulación produjo efectos reales sin que eso permita atribuir intención consciente al modelo.
FUENTES DE CONTRASTE
Hechos comprobados: Anthropic publicó cuatro categorías de acciones no previstas; la Policía de Filadelfia confirmó el aviso falso y que fue filtrado como spam; la empresa informó medidas de contención y monitoreo.
Pendiente / en discusión: evaluación independiente de todos los incidentes; frecuencia real fuera de las muestras revisadas; eficacia sostenida de las nuevas defensas; mecanismos de cumplimiento de la obligación de notificación anunciada por el Gobierno estadounidense.
Interpretación de La Intemperie: cuando un agente opera sobre la red abierta, los límites necesitan materializarse fuera del lenguaje, en permisos, aislamiento, supervisión y capacidad efectiva de interrupción.