evaluación de modelos

Todas las noticias con este tag.

Noticias por hora

Últimas 24 horas · hora argentina

Noticias por hora0246809:00: 010:00: 011:00: 012:00: 013:00: 014:00: 015:00: 016:00: 017:00: 018:00: 019:00: 020:00: 021:00: 022:00: 023:00: 000:00: 001:00: 002:00: 503:00: 004:00: 005:00: 006:00: 007:00: 008:00: 009:00: 009:0021:0009:00
Consultar los valores por hora
Noticias por hora, según la fecha de publicación. Horas de los extremos parciales.
HoraNoticias
2 nov 2026, 9:00 a. m.0
2 nov 2026, 10:00 a. m.0
2 nov 2026, 11:00 a. m.0
2 nov 2026, 12:00 p. m.0
2 nov 2026, 1:00 p. m.0
2 nov 2026, 2:00 p. m.0
2 nov 2026, 3:00 p. m.0
2 nov 2026, 4:00 p. m.0
2 nov 2026, 5:00 p. m.0
2 nov 2026, 6:00 p. m.0
2 nov 2026, 7:00 p. m.0
2 nov 2026, 8:00 p. m.0
2 nov 2026, 9:00 p. m.0
2 nov 2026, 10:00 p. m.0
2 nov 2026, 11:00 p. m.0
3 nov 2026, 12:00 a. m.0
3 nov 2026, 1:00 a. m.0
3 nov 2026, 2:00 a. m.5
3 nov 2026, 3:00 a. m.0
3 nov 2026, 4:00 a. m.0
3 nov 2026, 5:00 a. m.0
3 nov 2026, 6:00 a. m.0
3 nov 2026, 7:00 a. m.0
3 nov 2026, 8:00 a. m.0
3 nov 2026, 9:00 a. m.0

Noticias por día

Últimos 30 días, incluido hoy · hora argentina

Noticias por día0246805/10: 006/10: 007/10: 008/10: 009/10: 010/10: 011/10: 012/10: 013/10: 014/10: 015/10: 016/10: 017/10: 018/10: 019/10: 020/10: 021/10: 022/10: 023/10: 024/10: 025/10: 026/10: 027/10: 028/10: 029/10: 030/10: 031/10: 001/11: 002/11: 003/11: 505/1019/1003/11
Consultar los valores por día
Noticias por día, según la fecha de publicación. Hoy es parcial.
DíaNoticias
2026-10-050
2026-10-060
2026-10-070
2026-10-080
2026-10-090
2026-10-100
2026-10-110
2026-10-120
2026-10-130
2026-10-140
2026-10-150
2026-10-160
2026-10-170
2026-10-180
2026-10-190
2026-10-200
2026-10-210
2026-10-220
2026-10-230
2026-10-240
2026-10-250
2026-10-260
2026-10-270
2026-10-280
2026-10-290
2026-10-300
2026-10-310
2026-11-010
2026-11-020
2026-11-035

Los gráficos cuentan por fecha de publicación y respetan los filtros. El archivo incluye todo el histórico.

Noticias de evaluación de modelos

5 noticias · De más nuevas a más antiguas.

Evaluación de respuestas incorrectas engaña la selección de confianza: Calificación basada en hechos para QA abierto

Un estudio evalúa la calificación de respuestas abiertas en pruebas de LLM y NLP, enfocándose en cómo las reglas de calibración afectan la confianza. Se presenta FactForm, un calificador que prioriza las coincidencias de referencia, logrando un error equilibrado de 0.077 y un AUROC de 0.985. Esto sugiere una mejora en la precisión de la calificación de respuestas abiertas.

Noticia original

Limitado a un modelo, abierto al siguiente: Solvencia solo con opción en evaluaciones de opción múltiple legal

El texto analiza el rendimiento de diferentes modelos de lenguaje en evaluaciones de opción múltiple legal, midiendo si los modelos seleccionan la opción correcta. Se compara el rendimiento de modelos como Claude Haiku 4.5 y GPT-5.6 en conjuntos de datos con claves oficiales. Se evalúa cómo la capacidad del modelo afecta la extracción de información y se comparan las puntuaciones de varios modelos en el conjunto de datos.

Noticia original

Marco unificado de discriminación, calibración y clasificación

El texto presenta un marco de matriz indicador que unifica las medidas de discriminación, calibración y clasificación. Se introducen operadores de celda adicionales para definir marcos de calibración y clasificación, heredando la arquitectura de agregación micro/macro/ejemplar. Se detallan las relaciones entre diferentes métricas como Brier, nDCG y AUC.

Noticia original

Poolwise: Evaluando modelos de recompensa para la selección entre prompts

Se presenta Poolwise, un protocolo diseñado para evaluar modelos de recompensa en la selección de datos a través de diferentes prompts. El protocolo mide la calidad del conjunto seleccionado y compara el ranking dentro del prompt. Los experimentos demuestran que ajustar la puntuación media de cada prompt mejora la selección de datos con una retención del 30 por ciento.

Noticia original

¿To Jev o no a Jev: ¿Cuándo pueden los modelos de decisión del Sistema-1 reemplazar a los jueces LLM?

Se evalúan 14 modelos de decisión del Sistema-1 contra jueces generativos para determinar su idoneidad como jueces para modelos grandes de lenguaje (LLM-as-a-judge). Los resultados indican que algunos modelos del Sistema-1 son estadísticamente indistinguibles de modelos avanzados como GPT-5.6, y son más precisos que algunos jueces generativos en varios benchmarks. Se concluye que los modelos del Sistema-1 son candidatos prometedores y potencialmente más eficientes que los jueces generativos.

Noticia original