Anthropic publica métricas internas sobre cuánto de su I+D lidera Claude, con metodología cuestionable
Hecho Qué ha ocurrido
Anthropic difundió por primera vez métricas sobre el desarrollo de sus propios modelos: según la escala de Epoch AI (AL0 a AL5), el 26% del trabajo de investigación se sitúa en AL4 ('lidera'), frente a menos del 1% en febrero. La propia Claude realizó la puntuación, y una comprobación interna mostró que humanos coincidían entre sí solo un tercio de las veces, y con el modelo un 59%. También reportó que un monitor de seguridad bloqueó el 0,002% de más de mil millones de decisiones de agentes, y que un 6% del cómputo de investigación se dedicó a seguridad.
Resumen generado mediante IA a partir de The Decoder (original en inglés). Naturaleza de la información: declaración de parte interesada.
Análisis Por qué importa
La métrica sirve tanto como reclamo de producto como argumento para la propuesta de Dario Amodei de frenar coordinadamente el desarrollo de IA de frontera, pero su metodología —autoevaluada por Claude y con definiciones ambiguas— debilita su valor como evidencia objetiva.
- Quién se ve afectado
- Laboratorios de IA, reguladores, analistas de gobernanza de IA y empresas que evalúan la fiabilidad de las autoevaluaciones de las compañías de IA.
- Qué puede cambiar
- Podría marcar una tendencia hacia la publicación de métricas de 'autonomía interna' como forma de transparencia, aunque con el riesgo de que cada empresa defina los umbrales a su conveniencia.
Análisis generado a partir de la información disponible; no procede de la fuente.
Predicción Qué observar a continuación
Si otros laboratorios (OpenAI, Google DeepMind) adoptan métricas similares, si Epoch AI u otros terceros auditan la escala AL0-AL5, y cómo evoluciona el debate regulatorio sobre transparencia en el desarrollo de IA.
Enviar esta noticia por correo
Enviado. Revisa que llegue a la bandeja de entrada de quien lo reciba.
La dirección no parece válida.
Has enviado varios correos seguidos. Espera un rato.
No se ha podido comprobar que no eres un robot. Vuelve a intentarlo.
No se ha podido enviar. Inténtalo de nuevo en unos minutos.
Fuente original: The Decoder. La referencia es siempre el artículo original.
Ver fuente original ↗agentesLLM AnthropicEpoch AI Anthropic autonomía de IA Claude seguridad de IA transparencia
Forma parte de la historia Anthropic mide cuánto automatiza Claude su propia I+D (7 noticias, estado: alto impacto).
Relacionadas
Anthropic revela que Claude lidera ya el 26% de la investigación interna para crear nuevos modelos de IA
Anthropic publicó un índice experimental que mide la participación de Claude en su propia investigación y desarrollo: en agosto de 2026 el modelo lideró el 26%…
Por qué importaEl dato ofrece una medición concreta de cuánto se está automatizando el propio proceso de creación de IA, algo clave para anticipar la velocidad de…
Anthropic reporta aumento del uso de Claude en su propia investigación y desarrollo de modelos
Anthropic publicó datos internos que muestran un rápido incremento del uso de Claude en sus propios procesos de investigación y desarrollo de modelos. La…
Por qué importaEl uso de IA para acelerar el desarrollo de IA plantea dudas sobre supervisión, seguridad y velocidad de progreso que afectan directamente a la…
Claude ya lidera el 26% de la investigación interna de Anthropic sobre su propio desarrollo
Anthropic informó que Claude capitanea el 26% de su trabajo de investigación y desarrollo, frente al 1% de marzo. La empresa reportó unos 30.000 agentes…
Por qué importaMuestra cómo los modelos de IA empiezan a participar directamente en el diseño de sus propias sucesoras, acelerando el ciclo de desarrollo de forma…
Anthropic propone tres métricas para medir la velocidad de avance de la IA de frontera
Anthropic presentó tres mediciones: el Índice de Automatización de I+D (Claude lidera el 26% del trabajo de I+D y participa en más del 90%), la supervisión de…
Por qué importaEstas métricas ofrecen una forma concreta de rastrear cuánto se está automatizando el desarrollo de IA dentro de un laboratorio líder, algo clave…
Tu opinión
Te hemos enviado un correo para confirmar tu dirección. El comentario se procesará cuando pulses el enlace.
Gracias. Tu comentario se publicará cuando lo revise el equipo (los primeros comentarios de cada persona se moderan).
Comentario publicado. Gracias por participar.
No se puede comentar aquí.
Indica un nombre (de 2 a 60 caracteres).
El correo no parece válido.
El comentario debe tener entre 10 y 2.000 caracteres.
Demasiados enlaces en el comentario.
No se ha podido comprobar que no eres un robot. Vuelve a intentarlo.
Has alcanzado el límite diario de comentarios.
Demasiados comentarios seguidos. Espera un rato.
No se ha podido enviar el correo de confirmación. Inténtalo de nuevo en unos minutos.