Buscar noticias
Buscá por texto y descubrí noticias relacionadas con tu consulta.
Noticias relevantes
Hasta 10 noticias relacionadas por su significado, ordenadas por relevancia.
No encontramos noticias relacionadas por su significado.
Noticias encontradas
Coincidencias por palabras en títulos, resúmenes, temas, personas, lugares o firmas.
Resultados para «Abouelseoud»
Más recientes primero · Hasta 30 noticias por página
Hugging Face BlogInception y MBZUAI lanzan un espacio unificado de leaderboards para evaluar modelos de IA en árabe
Inception, en colaboración con la Universidad Mohammed bin Zayed de Inteligencia Artificial (MBZUAI), lanzó el Espacio Arabic-Leaderboards, una plataforma unificada para evaluar modelos de IA en árabe. Incluye la versión actualizada AraGen-03-25, con 340 pares de preguntas y respuestas, y el primer leaderboard público de seguimiento de instrucciones en árabe basado en el benchmark Arabic IFEval. El modelo o1-2024-12-17 lidera ambos rankings, aunque el nuevo conjunto de datos resultó más difícil y redujo los puntajes absolutos de los modelos.
Nuevo marco de evaluación 3C3H y benchmark AraGen para modelos de lenguaje en árabe
Investigadores de Inception y MBZUAI presentaron AraGen, un benchmark generativo y leaderboard para evaluar modelos de lenguaje en árabe, junto con la medida 3C3H que puntúa corrección, completitud, concisión, utilidad, honestidad e inocuidad mediante LLM-como-juez. El leaderboard usa ciclos de prueba ciega de tres meses para evitar contaminación de datos y publica luego el dataset y el código. Tras comparar varios jueces, eligieron Claude-3.5-sonnet por su consistencia y bajo sesgo propio.