Podle BlockBeats 28. června OpenAI uvedla, že vycvičila model založený na GPT-4 nazvaný CriticGPT, aby zachytil chyby ve výstupu kódu ChatGPT. OpenAI začíná integrovat modely podobné CriticGPT do svých RLHF a poskytuje výslovnou pomoc AI školitelům OpenAI. OpenAI plánuje dále rozšířit aplikační škálu RLHF na GPT-4 a uvést ji do praxe.