3️⃣ 训练后革命 后培训是如此便宜，更多的团队可以利用LLM定制 3种方法：SFT，DPO，在线RL。将令牌预测器转换为有用的助手，用于预培训成本的一小部分。