• 目标:消除对数千种环境进行 RL 的必要性。
    • 训练一个小型 steerer 模型,引导一个良好的基础编码模型 LLM。