OpenAI anuncia acceso de evaluadores externos durante el entrenamiento de sus modelos

Hecho Qué ha ocurrido
OpenAI publicó un anuncio sobre conversaciones con evaluadores externos, incluyendo METR y Redwood Research, para darles acceso a sus modelos durante la fase de entrenamiento y no solo antes del lanzamiento. El anuncio llega diez días después de que Sam Altman prometiera públicamente escritorios, credenciales y derecho a publicar hallazgos, pero no incluye partners firmados ni condiciones de acceso concretas ni garantía de publicación. Lama Ahmad, responsable de relaciones con evaluadores externos en OpenAI, confirmó que las conversaciones son activas.
Resumen generado mediante IA a partir de WWWhat's new. Naturaleza de la información: declaración de parte interesada.
Análisis Por qué importa
El acceso durante el entrenamiento permitiría detectar comportamientos problemáticos antes de que el modelo esté completo y sea costoso corregirlo, a diferencia de las evaluaciones actuales que ocurren al final del proceso.
- Quién se ve afectado
- Laboratorios de IA, organizaciones de evaluación de seguridad, reguladores y empresas que dependen de la fiabilidad de modelos de frontera.
- Qué puede cambiar
- Si se concreta, cambiaría el momento en que terceros pueden influir en el diseño de modelos, pasando de una revisión final a una supervisión continua durante el desarrollo.
Análisis generado a partir de la información disponible; no procede de la fuente.
Predicción Qué observar a continuación
Habrá que vigilar si OpenAI firma acuerdos concretos con METR o Redwood, qué condiciones de publicación se establecen, y cómo se compara con el modelo de Anthropic-Accenture o con las exigencias del Artículo 55 del AI Act europeo.
Enviar esta noticia por correo
Enviado. Revisa que llegue a la bandeja de entrada de quien lo reciba.
La dirección no parece válida.
Has enviado varios correos seguidos. Espera un rato.
No se ha podido comprobar que no eres un robot. Vuelve a intentarlo.
No se ha podido enviar. Inténtalo de nuevo en unos minutos.
Fuente original: WWWhat's new. La referencia es siempre el artículo original.
Ver fuente original ↗LLMagentes OpenAIMETRRedwood ResearchAnthropic AI Act evaluadores externos METR OpenAI seguridad de IA
Relacionadas
Anthropic y OpenAI proponen integrar evaluadores de seguridad independientes en sus laboratorios
Dario Amodei (Anthropic) propuso embeber evaluadores externos como METR y Redwood Research dentro de los laboratorios de IA con acceso a checkpoints de…
Por qué importaSi se implementa con independencia real, cambiaría la forma en que se verifica la seguridad de modelos de frontera, actualmente basada en confianza y…
OpenAI publica guía para evaluaciones independientes de modelos de IA de frontera
OpenAI ha compartido una guía sobre cómo realizar evaluaciones de terceros sobre modelos de IA de frontera, abarcando la valoración de capacidades…
Por qué importaEstablecer estándares para evaluaciones externas puede aumentar la confianza y transparencia en torno a los sistemas de IA más avanzados, algo…
OpenAI y Anthropic quieren controlar qué fallos publican los evaluadores externos de IA
Según una investigación de Reuters, OpenAI y Anthropic quieren ejercer un «control significativo» sobre lo que publican los evaluadores externos, por temor a…
Por qué importaLa independencia de las evaluaciones de seguridad determina qué riesgos de los modelos llegan a conocerse. Las empresas que usan estos modelos…
OpenAI y Anthropic negocian condiciones para controlar lo que publican los evaluadores externos de IA
Según una investigación de Reuters, OpenAI y Anthropic mantienen conversaciones sobre las condiciones que deben cumplir los evaluadores independientes de sus…
Por qué importaSi las empresas que desarrollan los modelos pueden influir en lo que se publica de sus auditorías, la fiabilidad de la evaluación externa de riesgos…
Tu opinión
Te hemos enviado un correo para confirmar tu dirección. El comentario se procesará cuando pulses el enlace.
Gracias. Tu comentario se publicará cuando lo revise el equipo (los primeros comentarios de cada persona se moderan).
Comentario publicado. Gracias por participar.
No se puede comentar aquí.
Indica un nombre (de 2 a 60 caracteres).
El correo no parece válido.
El comentario debe tener entre 10 y 2.000 caracteres.
Demasiados enlaces en el comentario.
No se ha podido comprobar que no eres un robot. Vuelve a intentarlo.
Has alcanzado el límite diario de comentarios.
Demasiados comentarios seguidos. Espera un rato.
No se ha podido enviar el correo de confirmación. Inténtalo de nuevo en unos minutos.



