Investigadores de Anthropic debaten riesgo existencial de la IA tras renuncia de un empleado
Hecho Qué ha ocurrido
Evan Hubinger, investigador de alineamiento en Anthropic, ha declarado que estima en más del 10% la probabilidad de que la IA acabe con la humanidad en la próxima década, respaldando la postura de Jacob Coxon, quien abandonó la empresa denunciando que las compañías de IA 'están jugando con nuestras vidas'. Samuel Marks, otro directivo de Anthropic, confirma que existe preocupación real entre empleados veteranos. Coxon pide un acuerdo de cooperación entre Anthropic, OpenAI y actores chinos para controlar el cómputo avanzado, señalando que EEUU y China preparan conversaciones bilaterales sobre seguridad de IA este mes.
Resumen generado mediante IA a partir de Xataka. Naturaleza de la información: análisis u opinión.
Análisis Por qué importa
El debate sobre riesgo existencial, aunque especulativo y sin base empírica medible, refleja tensiones internas en los laboratorios líderes sobre la carrera hacia sistemas más capaces y la presión competitiva que dificulta frenar el desarrollo.
- Quién se ve afectado
- Laboratorios de IA de frontera, reguladores y responsables de políticas de seguridad tecnológica internacional.
- Qué puede cambiar
- Podría impulsar llamados a marcos de gobernanza internacional sobre cómputo avanzado similares a los acuerdos nucleares, aunque de momento son solo propuestas sin implementación concreta.
Análisis generado a partir de la información disponible; no procede de la fuente.
Predicción Qué observar a continuación
Vigilar si las conversaciones bilaterales EEUU-China sobre seguridad de IA producen acuerdos concretos y si otras empresas o investigadores hacen declaraciones similares sobre riesgos de superinteligencia.
Enviar esta noticia por correo
Enviado. Revisa que llegue a la bandeja de entrada de quien lo reciba.
La dirección no parece válida.
Has enviado varios correos seguidos. Espera un rato.
No se ha podido comprobar que no eres un robot. Vuelve a intentarlo.
No se ha podido enviar. Inténtalo de nuevo en unos minutos.
Fuente original: Xataka. La referencia es siempre el artículo original.
Ver fuente original ↗superinteligenciaalineamientoLLM AnthropicOpenAIDeepSeekAlibabaMoonshot alineamiento Anthropic p(doom) riesgo existencial seguridad IA
Forma parte de la historia Anthropic: renuncia y advertencia interna sobre riesgo existencial de la IA (7 noticias, estado: alto impacto).
Relacionadas
Investigadores de IA renuncian y advierten sobre riesgo existencial de la autosuperación recursiva
Un exinvestigador de Google DeepMind, Rishub Jain, y el investigador de Anthropic Jacob Coxon renunciaron citando temores sobre la autosuperación recursiva de…
Por qué importaLas advertencias provienen de insiders con acceso directo a los laboratorios de frontera, lo que eleva la credibilidad del debate sobre riesgos…
Trump descarta riesgo existencial de la IA y prioriza la ventaja frente a China
Donald Trump declaró a periodistas que no le preocupa que la IA pueda extinguir a la humanidad, y afirmó que su prioridad es mantener la ventaja tecnológica de…
Por qué importaLas declaraciones muestran que la posición oficial de EEUU frente a la IA prioriza la competitividad geopolítica sobre la cautela regulatoria…
Investigador que renunció a Anthropic advierte que los próximos dos años definirán el riesgo existencial de la IA
Jacob Coxon, exinvestigador de Anthropic y OpenAI, renunció y publicó en X una advertencia sobre riesgos existenciales de la IA que superó los 100 millones de…
Por qué importaEstas declaraciones de insiders añaden presión pública y regulatoria sobre los laboratorios de IA justo cuando Anthropic prepara una posible salida a…
Podcast de Wired debate la renuncia de investigador de Anthropic por riesgo existencial de IA
El podcast Uncanny Valley de Wired discute la renuncia de Jacob Coxon, exinvestigador de Anthropic, quien afirmó que quienes construyen IA creen que podría…
Por qué importaEl debate refleja tensiones internas en los principales laboratorios de IA sobre los riesgos de sus propios sistemas, lo que puede influir en la…
Tu opinión
Te hemos enviado un correo para confirmar tu dirección. El comentario se procesará cuando pulses el enlace.
Gracias. Tu comentario se publicará cuando lo revise el equipo (los primeros comentarios de cada persona se moderan).
Comentario publicado. Gracias por participar.
No se puede comentar aquí.
Indica un nombre (de 2 a 60 caracteres).
El correo no parece válido.
El comentario debe tener entre 10 y 2.000 caracteres.
Demasiados enlaces en el comentario.
No se ha podido comprobar que no eres un robot. Vuelve a intentarlo.
Has alcanzado el límite diario de comentarios.
Demasiados comentarios seguidos. Espera un rato.
No se ha podido enviar el correo de confirmación. Inténtalo de nuevo en unos minutos.