Brett Winton: 这只是一个经济问题吗？ （收集人类反馈是昂贵的） 这不会导致偏好模型过度拟合吗？

原推：Is it just a matter of economics? (Collecting the human feedback is expensive)

Wouldn’t this lead the preference model to overfit?
https://twitter.com/wintonARK/status/1623786708000210944