Saskaņā ar BlockBeats datiem 28. jūnijā OpenAI paziņoja, ka ir apmācījis uz GPT-4 balstītu modeli ar nosaukumu CriticGPT, lai uztvertu kļūdas ChatGPT koda izvadē. OpenAI sāk integrēt CriticGPT līdzīgus modeļus savā RLHF, nodrošinot skaidru AI palīdzību OpenAI treneriem. OpenAI plāno vēl vairāk paplašināt RLHF pielietojuma mērogu GPT-4 un ieviest to praksē.