Reward Model 常用什么结构，与 Value Model 有什么区别？

为什么有了reward model还需要critic model？critic model作用是什么？

-reward model 一般是什么结构？和 value model 有什么区别？