policy optimization

VPO 讓搜尋更會找答案

VPO 把語言模型訓練成會產生多樣解法，讓 test-time search 在多候選搜尋時更容易挑到好答案。