Cómo los modelos de lenguaje poseen respuestas, dirigen las siguientes

Resumen del corpus

Se investiga cómo las respuestas de los modelos de lenguaje cambian al responder preguntas sucesivas sobre la misma entidad, midiendo un "auto-compromiso". Se analiza cómo la lectura de esta dirección de compromiso varía según la escala del modelo, el entrenamiento y el prompt utilizado. Se demuestra que la alineación de la dirección con el componente principal del texto predice el costo de los modelos.

Noticia original

Ver todas las noticias de arXiv Computer Science AI