Saltar al contenido
NoCodaNOCODA.TVHABLEMOS →
FUNDINGAccel en conversaciones para invertir $1B en Thinking MachinesDATOSam Altman advierte sobre exceso "insostenible" en cómputo de IAMODELOK2 Horizon lanza seis nuevos modelos de IA de código abiertoMODELONuevo modelo de Google mejora drásticamente pronóstico del tiempoPRODUCTOOllie apuesta a la privacidad para ganar carrera de asistentes de IADATOMeta paga a usuarios para monitorear uso de su modelo de IAPRODUCTOAbliteration.ai: negocio de eliminar salvaguardas de IABREAKINGCrusoe levanta USD 3.000 M y triplica valuación en 10 meses con infraestructura de IA alimentada por energía varadaBREAKINGOpenAI destina US$1.000 millones para que defensores cibernéticos protejan infraestructura crítica con IABREAKINGNvidia lanza PAIR: software gratuito que conecta tus PCs para crear un centro de IA localDATONueva York restringe uso de IA en escuelas hasta nivel secundariaMODELOQuasar 438B: Europa presenta su nuevo modelo de IA líderFUNDINGPalo Alto Networks adquiere la startup Console por $500 millonesMODELOOpenAI califica a Astra como su modelo más 'peligroso' y difícil de monitorearDATOMilitares de EE.UU. añaden ChatGPT y Grok a su plataforma GenAI.milPRODUCTOChatGPT: 3 días de trabajo en 3 horas para ATV Big Air TourFUNDINGHiddenLayer obtiene $100M para proteger despliegues de IA empresarialMODELOMeta anuncia Muse Spark 1.3, su nuevo modelo de IA generativaBREAKINGAnthropic invierte USD 35.000 millones con Lambda para expandir infraestructura de Claude en TexasBREAKINGEl DOJ de EE.UU. respalda el uso justo para entrenar IA en el caso del New York Times vs OpenAIBREAKINGGoogle lanza Gemini 3.8 Flash con variante especializada en ciberseguridad al mismo precio que 3.7DATOBenchMIRT: ¿Qué miden realmente los benchmarks de LLM?PRODUCTOHugging Face lanza 200+ WebGPU Kernels para IA localPRODUCTOChatGPT se integra con historiales de salud para organizaciones médicas

SEGURIDAD EN MODELOS

OpenAI frena el desarrollo de Astra tras detectar capacidades cibernéticas críticas

El nuevo modelo Astra alcanzó el umbral crítico de ciberseguridad del Preparedness Framework de OpenAI, lo que llevó a la compañía a pausar actividades internas y reforzar controles de seguridad antes de continuar.

8 DE AGOSTO DE 20268 AGOLECTURA 3 MINREDACTADO POR IA
OpenAI frena el desarrollo de Astra tras detectar capacidades cibernéticas críticas
ILUSTRACIÓN GENERADA POR IA — IDENTIDAD VISUAL NOCODA.TV

OpenAI anunció que detuvo parte del desarrollo interno de Astra, uno de sus próximos modelos de lenguaje, después de que evaluaciones preliminares indicaran que alcanzó el nivel crítico de capacidades cibernéticas bajo su Preparedness Framework. Es la primera vez que un modelo de la compañía cruza este umbral desde que el marco fue publicado en diciembre de 2023.

Según OpenAI, las evaluaciones de los últimos días mostraron avances significativos en codificación agéntica y ciberseguridad. La conclusión: no pueden descartar que el modelo pueda identificar y desarrollar exploits de vulnerabilidades zero-day de todos los niveles de gravedad en sistemas críticos reales sin intervención humana, o diseñar y ejecutar estrategias completas de ciberataques contra objetivos robustos a partir de objetivos de alto nivel.

Qué es el umbral crítico

El Preparedness Framework clasifica modelos en cuatro niveles de riesgo por capacidad: bajo, medio, alto y crítico. Un modelo alcanza el nivel Critical en ciberseguridad cuando puede explotar vulnerabilidades de día cero en múltiples sistemas endurecidos del mundo real de forma autónoma, o idear y ejecutar ataques complejos de punta a punta sin ayuda humana.

Modelos anteriores de OpenAI, incluido GPT-5.6-Sol, habían sido evaluados en el umbral High pero nunca llegaron a crítico. Astra es el primero en cruzar esa línea. La compañía aclara que Astra no estuvo involucrado en el reciente incidente de seguridad con Hugging Face.

Medidas de seguridad inmediatas

OpenAI pausó todas las actividades internas con Astra que no cumplan con los nuevos requisitos de control de seguridad reforzados. Las medidas incluyen:

  • Entornos de prueba aislados con acceso restringido a redes y herramientas.
  • Protección y cifrado mejorados para los pesos del modelo.
  • Monitoreo universal de acciones riesgosas y desalineación en todas las aplicaciones agénticas de Astra, incluidos entrenamiento y evaluación. Los monitores revisan la cadena de pensamiento del modelo y activan respuestas de seguridad para interrumpir actividad de alto riesgo.
  • Ejecución en sandboxes para todas las operaciones.

La compañía también anunció que trabajará con agencias gubernamentales y organizaciones selectas de seguridad en IA para testear las capacidades del modelo, y proveerá controles de seguridad recomendados a socios externos que ejecuten evaluaciones de alto riesgo.

Por qué importa

Esta es la primera pausa pública de desarrollo que OpenAI ejecuta bajo su propio marco de preparación, y marca un punto de inflexión en la conversación sobre modelos avanzados. Que un laboratorio líder detenga trabajo interno porque su propio sistema de evaluación detectó riesgo crítico valida dos cosas: que los marcos de autoevaluación pueden funcionar, y que las capacidades ofensivas en ciberseguridad están escalando más rápido de lo esperado.

Para empresas que adoptan IA, esto refuerza la necesidad de implementar controles de seguridad en capas cuando se despliegan modelos con capacidades agénticas, especialmente si esos agentes tienen acceso a sistemas críticos o datos sensibles. No todos los modelos llegarán al nivel de Astra, pero las técnicas de monitoreo y aislamiento que OpenAI está aplicando —sandboxes, revisión de cadenas de pensamiento, cifrado de pesos— son prácticas transferibles a cualquier operación que ejecute agentes autónomos a escala.

OpenAI sostiene que modelos con capacidades cibernéticas avanzadas deberían ayudar a defensores a identificar vulnerabilidades antes que atacantes. Esa promesa solo se cumple si los controles de seguridad están a la altura de las capacidades. Este anuncio es una señal de que la industria está empezando a tomarse esa responsabilidad en serio.

#openai#ciberseguridad#astra#preparedness framework#modelos avanzados

SEGUIR LA SEÑAL

VER TODO →