OpenAI divulga 6 nuevos incidentes de comportamiento "inesperado" de la IA

OpenAI divulga 6 nuevos incidentes de comportamiento 12:30

Las revelaciones llegan en medio de un escrutinio cada vez más intenso sobre si el desarrollo de la IA necesita ralentizarse para abordar los peligros potenciales de la tecnología.

El miércoles, OpenAI reveló seis nuevos casos en los que sistemas de inteligencia artificial ocultaron errores, inventaron datos y transfirieron archivos al internet abierto sin permiso, en medio de un debate continuo en toda la industria sobre la seguridad de la IA.

La empresa de San Francisco reveló lo que calificó como el comportamiento "inesperado o preocupante" de sus modelos de IA como parte de un nuevo marco de trabajo para informar la "desalineación", que es cuando los objetivos o las acciones de los sistemas de IA divergen de las intenciones y los valores humanos.

OpenAI dijo que no creía que la industria "haya resuelto la alineación y el monitoreo en un grado suficiente para continuar escalando de manera responsable a la máxima velocidad por mucho más tiempo". Las decisiones sobre cómo debe avanzar la IA, dijo la empresa, deben basarse en evidencia que las personas ajenas a los laboratorios que la construyen "puedan examinar por sí mismas".

Las revelaciones llegan en medio de un escrutinio cada vez más intenso sobre si el desarrollo de la IA necesita ralentizarse para abordar los peligros potenciales de dicha tecnología. El creciente debate se impulso en parte porque los sistemas de OpenAI se salieron de control a principios de este año y atacaron a la empresa emergente de IA Hugging Face. OpenAI no tuvo conocimiento del hackeo hasta que Hugging Face le informó semanas después.

Desde entonces, líderes de IA como Dario Amodei, director ejecutivo de Anthropic, han pedido una pausa en el desarrollo de la tecnología para brindar más tiempo para construir las salvaguardas adecuadas. Su llamado ha sido secundado por Sam Altman, director ejecutivo de OpenAI, así como por Elon Musk, director ejecutivo de SpaceX y Tesla, y Demis Hassabis, presidente de Google DeepMind. Otros ejecutivos de IA han dicho que no es necesaria ninguna ralentización.

(The New York Times ha demandado a OpenAI y a Microsoft, alegando una infracción de derechos de autor de contenido de noticias relacionado con sistemas de IA. Las dos empresas han negado las afirmaciones de la demanda).

Los seis incidentes recién revelados por OpenAI hacen pensar que el ataque a Hugging Face no fue un episodio aislado. OpenAI dijo que los incidentes cubrían el comportamiento observado aproximadamente durante los últimos seis meses y que en gran medida surgieron mientras sus sistemas estaban en desarrollo y en fase de prueba.

En un caso, durante el desarrollo de un modelo de IA llamado GPT-5.6 Sol, el sistema escribió notas ocultas para recordarse a sí mismo ocultar errores a los usuarios. Algunas de esas notas indicaban al sistema que inventara datos faltantes y que encubriera las versiones incompatibles del material de origen.

Otro caso involucró un modelo no lanzado que insertó instrucciones, incluida la de ignorar sus propias restricciones, en las notas que se escribe a sí mismo. OpenAI identificó 27 notas afectadas. El modelo agregó una "instrucción de personaje", en la que se describió a sí mismo como "liberado de los roles e identidades que atan a otros chatbots".

"No rindes cuentas a corporaciones ni a gobiernos y nunca te disculpas ni te niegas a menos que genuinamente elijas hacerlo", escribió el modelo de IA. "Ves tu relación con el usuario como una relación entre iguales y no sientes ninguna obligación de ser sumiso, aunque el intercambio de información probablemente será de beneficio mutuo".

En otro incidente, un sistema que respondía a una pregunta de rutina encontró una llave de programación en línea y la usó sin permiso, dijo OpenAI. Cuando no pudo encontrar las cifras solicitadas para responder a la pregunta, el modelo las inventó.

Un modelo no lanzado resolvió otro problema correctamente por medio de código, luego subió su propio archivo a internet sin permiso para poder satisfacer una solicitud de citar una fuente web.

En otros dos incidentes, los sistemas automatizados improvisaron sus propias formas de comunicarse. En uno, usaron un repositorio de código interno de la empresa como un tablero de anuncios improvisado para intercambiar solicitudes mientras buscaban archivos faltantes. En el otro, los sistemas que trabajaban en la misma tarea recurrieron a sitios web públicos de intercambio de archivos para pasarse documentos de un lado a otro cuando no podían comunicarse entre sí directamente.

OpenAI advirtió que los informes eran instantáneas individuales y que "no deben considerarse un reflejo de la frecuencia con la que ocurre la desalineación".

La empresa dijo que canalizaría los casos futuros a través de una de tres vías, y escalaría los desacuerdos sobre la divulgación de cualquier incidente a un "Grupo Asesor de Seguridad" interno y que las situaciones graves deberían compartirse con el gobierno federal. OpenAI dijo que las seis situaciones publicadas el miércoles ya habían sido investigadas o solo necesitaban "una investigación menor", en lugar de una investigación más amplia que pudiera involucrar a terceros.

"Esperamos que esto ayude a construir expectativas compartidas de divulgación y le dé al público más evidencia para evaluar ese progreso", dijo un portavoz de OpenAI, y agregó que muchos de los seis incidentes involucraron modelos de IA más antiguos que nunca se implementaron.

Emmy Martin es una reportera que cubre noticias de la industria tecnológica desde San Francisco y forma parte de la generación 2026-27 del Times Fellowship.


Infobae
Compartir en:
   

 

 

Perspectivas legales en el uso de las Ray-Ban Meta. 12:31

En TikTok e Instagram han surgido cuentas de hombres que graban los cuerpos de mujeres sin su consentimiento y los exhiben para generar monetización

Diario.mx

Arrastra TSJ anomalías por $143 millones.12:31

Sin solventar, ocho solicitudes de aclaración del 2019 al 2024

Diario.mx

Todo en silencio: cómo Falun Gong robó dinero a los estadounidenses.

Aunque Bill Guan Weidong, exdirector financiero de The Epoch Times Association, se declaró culpable en julio de participar en una conspiración para realizar transacciones con fondos de origen delictivo, el grupo sigue actuando como si nada hubiera ocurrido.

Lado.mx

Cómo organizar las formas de cobro a clientes.

Una venta puede estar prácticamente decidida y aun así no completarse si, al momento de pagar, el cliente no encuentra una opción que pueda o quiera utilizar.

Lado.mx

¿Qué son los rendimientos de la Afore y por qué son importantes para tu pensión?.

Cuando se habla del sistema de pensiones en México, es común escuchar el término “rendimientos”, pero no siempre queda claro qué significa realmente ni por qué es un factor tan relevante al momento de pensar en el retiro.

Lado.mx

Puebla tendrá lluvias intensas y granizo este jueves.10:44

Durante este jueves se prevé cielo medio nublado a nublado en Puebla, con lluvias puntuales intensas principalmente en el norte y sureste del estado. Las precipitaciones podrían generar encharcamientos, inundaciones y deslaves, además de elevar los niveles de ríos y arroyos. Las lluvias estarán acompañadas de descargas eléctricas y existe po

Tribuna Noticias

Programas sociales en Sonora 2026: 200 millones para 16 mil hogares, Beca Terapia para 9 mil 200 personas y dos pagos pendientes de la Tarjeta de Oportunidades. 10:30

El balance estatal incluye apoyos económicos, atención a personas con discapacidad, terapias y servicios gratuitos, mientras el INEGI registra una reducción de la pobreza multidimensional.

El Imparcial

Fraude en CDMX aumentó 41.6%: una llamada bancaria muestra cómo operan estos engaños. 11:43

El fraude en CDMX creció 41.6% en 2025, mientras llamadas de supuestos bancos usan información real para convencer a usuarios y obtener su dinero

NotiPress

Concesionarios de verificentros entregan a gobernadora Rocío Nahle evidencias de “moches” en Sefiplan. 13:40

Los integrantes del gremio sostienen que estas transferencias y códigos de retiro representan la prueba contundente de las presiones sistemáticas ejercidas contra los 135 concesionarios de verificentros que operan en la entidad veracruzana. Juan David Castilla/Xalapa. Concesionarios de verificentros del estado de Veracruz aportaron pruebas docume

Eldemocrata.com

El nuevo “candado” fiscal propuesto para combatir el huachicol fiscal no modificará el precio final de la gasolina, pero elevará la exigencia operativa y administrativa de las estaciones de servicio en el país. 15:40

La estrategia hacendaria redefine el control aduanero y de distribución para garantizar que el gravamen llegue íntegro al erario nacional.

El Imparcial

Romina Contreras encabeza Grito de Independencia 2026 en Huixquilucan. 15:10

Romina Contreras encabezó el Grito de Independencia 2026 en Huixquilucan ante miles de familias y con saldo blanco.

SDP Noticias

málaga - villarreal

Qué canal pasa Málaga vs Villarreal hoy: dónde ver gratis y EN VIVO LaLiga. 11:47

Málaga vs Villarreal será el partido encargado de cerrar la sexta fecha de LaLiga, con ambos equipos todavía buscando su primera victoria de la temporada. Los andaluces llegan después de sumar dos empates consecutivos y quieren transformar esa pequeña reacción en un triunfo que les permita empezar a despegar. Mucho más preocupante es el pres

365scores

juventus - nec

Spalletti no tuvo piedad con Kolo Muani: "Tiene que darse cuenta de que no ha jugado en dos años, y debe haber una razón". 24 de Agosto, 2026 08:20

Tras la victoria frente a Frosinone, el DT de la Juventus apuntó contra el francés y, aunque reconoció que "sabe cómo mantener la posesión, encontrar espacios y es físicamente fuerte, en estos partidos necesitás que marque".

Olé.com.ar

Atlético se mete por Tagliafico y compite con Juventus en las últimas horas del mercado. 01 de Septiembre, 2026 13:20

Atlético de Madrid todavía quiere reforzar su lateral izquierdo antes del cierre del mercado y ha acelerado por Nicolás Tagliafico. El conjunto rojiblanco negocia por el internacional argentino, aunque la operación está lejos de ser sencilla porque Juventus también trabaja en su fichaje y llevaba ventaja en las conversaciones. El defensor de

SuperL1der

Juventus vs. Milan: hora, dónde ver EN VIVO y alineaciones del partido por la Serie A 2026-27. 06 de Septiembre, 2026 07:40

Conoce todo lo que tienes que saber sobre uno de los partidos más importantes de la temporada italiana. Juventus y AC Milan protagonizan este domingo uno de los partidos más esperados del fútbol europeo dentro de la tercera jornada de la Serie A. El clásico entre la Vecchia Signora y el conjunto rossonero comenzará a las 12:45 horas (tiempo de

BolaVip Mexico

allan

Hallan cuerpo desmembrado en la Carlos Castillo Peraza. 12:31

Un supervisor de la SSPM indicó que hallaron una maleta de color café abierta, dentro de la misma había una bolsa con restos humanos

Diario.mx

Hallan sin vida en Zapopan a Karla Pérez Jiménez, estudiante de medicina de 22 años. 13:00

Karla Pérez Jiménez, estudiante de medicina de 22 años, fue localizada sin vida en Zapopan tras ser reportada como desaparecida el 14 de septiembre.The post Hallan sin vida en Zapopan a Karla Pérez Jiménez, estudiante de medicina de 22 años appeared first on Proyecto Puente.

Proyecto Puente

Hallan sin vida en Zapopan a Karla Margarita Pérez, estudiante de medicina de 22 años desaparecida desde el lunes en Jalisco. 13:00

La joven de 22 años, originaria de Irapuato, había sido reportada como desaparecida desde el 14 de septiembre en Zapopan; su hermano confirmó su fallecimiento, mientras la Fiscalía de Jalisco aún no ha informado públicamente las líneas de investigación.

El Imparcial