RLAIF
Reinforcement Learning from AI Feedback: sostituisce i valutatori umani dell'RLHF con un valutatore IA. Articoli di Anthropic e Google, 2023.
Il vantaggio: scala senza limiti (nessun reclutamento di valutatori). Il rischio: amplificazione dei bias, poiché il valutatore IA ha i propri. Secondo l'articolo di Google "RLAIF vs RLHF" (2023), la qualità è paragonabile a quella dell'RLHF nella maggior parte dei benchmark. Usato da Claude (tramite Constitutional AI), da Gemini e da diversi modelli open source.