Ir al contenido
IA para hoy

benchmark, página 2

Noticias etiquetadas con «benchmark»

31 noticias

Filtrar

Hugging Face y Treble Technologies lanzan FFASR: benchmark de reconocimiento de voz en entornos reales

Hugging Face y Treble Technologies han lanzado el FFASR Leaderboard (Far-Field ASR Leaderboard), un benchmark abierto y comunitario para evaluar modelos de…

Por qué importaLos modelos de reconocimiento de voz existentes se evalúan tradicionalmente en condiciones ideales (voz limpia, micrófono cercano) que no predicen…

Impacto medio Fiabilidad fuente primaria Relevancia 7/10 Hugging Face
Investigación

IBM y Artificial Analysis publican ITBench-AA: primer benchmark para agentes empresariales en IT

IBM Research y Artificial Analysis han publicado ITBench-AA, el primer benchmark diseñado específicamente para evaluar agentes de IA en tareas empresariales de…

Por qué importaEl benchmark evidencia que los modelos actuales aún no están listos para asumir de forma autónoma tareas IT complejas, lo cual es crítico para…

Impacto medio Fiabilidad confirmado por varias fuentes Relevancia 7/10 Hugging Face

VAKRA: benchmark ejecutable para evaluar agentes IA en entornos empresariales

IBM Research ha presentado VAKRA, un benchmark ejecutable que evalúa cómo los agentes de IA razonan y actúan en entornos similares a los empresariales. El…

Por qué importaVAKRA representa un avance significativo en la evaluación de agentes IA porque mide capacidades compositivas reales en flujos de trabajo de múltiples…

Impacto alto Fiabilidad fuente primaria Relevancia 8/10 Hugging Face

Cerebras recauda $1.000M a valoración de $23.000M; Benchmark invierte $225M adicionales

Cerebras Systems ha recaudado $1.000 millones en capital fresco con una valoración de $23.000 millones, casi el triple de su valoración de $8.100 millones hace…

Por qué importaCerebras posiciona un desafío arquitectónico concreto a la dominancia de Nvidia en chips de IA: su Wafer Scale Engine integra 4 billones de…

Impacto alto Fiabilidad una fuente fiable Relevancia 8/10 TechCrunch AI
Investigación

Google DeepMind publica benchmark NEVIS'22 para aprendizaje continuo en visión por computadora

Google DeepMind ha presentado NEVIS'22, un benchmark de visión por computadora compuesto por 106 tareas de clasificación extraídas de 30 años de investigación…

Por qué importaEl benchmark aborda un problema empresarial relevante: cómo entrenar modelos más eficientes que reutilicen conocimiento previo en lugar de…

Impacto medio Fiabilidad fuente primaria Google DeepMind
Investigación

DeepMind presenta RGB-Stacking, benchmark para robots que aprenden a manipular objetos diversos

Google DeepMind ha publicado RGB-Stacking, un nuevo benchmark para la manipulación robótica basada en visión, donde un robot debe aprender a apilar objetos de…

Por qué importaDemuestra un progreso importante hacia robots más generalizables, capaces de aprender comportamientos complejos de multi-objeto más allá de tareas…

Impacto medio Fiabilidad fuente primaria Google DeepMind
Investigación

DeepMind publica Melting Pot, benchmark para evaluación de aprendizaje multiagente

Google DeepMind ha presentado Melting Pot, una suite de evaluación para aprendizaje por refuerzo multiagente (MARL). La herramienta incluye 21 "substratos"…

Por qué importaLa evaluación sistemática de la generalización social en sistemas multiagente es crítica para desplegar tecnología autónoma segura en el mundo real…

Impacto medio Fiabilidad confirmado por varias fuentes Relevancia 7/10 Google DeepMind