Potrivit BlockBeats, pe 28 iunie, OpenAI a declarat că a antrenat un model bazat pe GPT-4 numit CriticGPT pentru a capta erorile în codul ChatGPT. OpenAI începe să integreze modele similare CriticGPT în RLHF lor, oferind asistență explicită AI formatorilor OpenAI. OpenAI intenționează să extindă în continuare scara de aplicare a RLHF pe GPT-4 și să o pună în practică.