好帖，闭源实验室用的一些RL细节正慢慢泄露出来。