En una frase

RLHF

Las personas comparan o puntúan respuestas de la IA y esa valoración se usa para enseñarle a producir respuestas que prefieran.

Del diccionario sin conexión