CL-Bench, un nuevo banco de pruebas que evalúa si los agentes de IA realmente mejoran con la experiencia en tareas reales secuenciales, encontró que incluso el mejor sistema —Claude Sonnet 4.6 con aprendizaje en contexto completo— logró solo una ganancia normalizada del 25,4% sobre su propia línea base sin memoria
Investigadores de UC Berkeley y Snorkel AI presentaron CL-Bench, un nuevo benchmark para evaluar qué tan bien mejoran los sistemas de IA con la experiencia secuencial en tareas del mundo real. Midieron la "métrica de ganancia" (gain metric) para aislar el aprendizaje de las capacidades previas. El sistema con mejor rendimiento, Claude Sonnet 4.6 utilizando aprendizaje en contexto de contexto completo, logró una ganancia normalizada del 25,4% sobre su propia línea de base.
Verificado 2026-09-23
Síguelo con IniciadoPor qué importa
Los agentes de IA actuales apenas aprenden de la experiencia, una limitación real para reemplazar a las personas que mejoran con la práctica.
Más sobre Modelos
- Los modelos de IA ya pueden ganar el oro en la Olimpiada Internacional de Matemáticas, pero el AI Index 2026 de Stanford halló que aún fallan en una tarea que la mayoría de los niños dominan pronto. En los 180 diseños de reloj y 720 preguntas de ClockBench, el mejor modelo, GPT-5.4 High, leyó correctamente relojes analógicos solo el 50,6 % de las veces, frente al 90,1 % de los humanos
- Tras casi cerrarse brevemente en 2024, la brecha de rendimiento entre los mejores modelos de IA de pesos cerrados y abiertos volvió a ampliarse en el ranking Arena. A marzo de 2026, el AI Index 2026 de Stanford encuentra que el mejor modelo cerrado lidera al mejor modelo abierto por un 3,3 %, frente a una ventaja del 0,5 % en agosto de 2024
- El Índice de IA 2026 de Stanford hace seguimiento del desempeño de los modelos de IA en GPQA Diamond, un conjunto de preguntas de química y física de nivel doctoral diseñadas para resistir las búsquedas en Google. La precisión media de los modelos en esta prueba alcanzó el 93 % en 2025, frente a una referencia de validadores humanos expertos de 81,2 % -- los modelos de IA ya superan a los expertos con doctorado por 12 puntos en GPQA Diamond
GRATIS · SIN TARJETA
Datos como este, seis días a la semana
The Daily Receipts entre semana, The Weekly Brief los sábados — seis datos con fuente al día por email, dos más que la web gratuita. Cada uno trazado hasta el documento del que salió. Gratis.
Quiero el brief diario gratisGratis · Sin tarjeta · Date de baja cuando quieras
Únete ahora y empiezas con 100 Receipts en The Receipts Ledger — tu primer paso hacia un año gratis de Iniciado o Pro. Cómo funciona →
Ver la edición de hoy →