电子书 A Little Bit of...

电子书 A Little Bit of Reinforcement Learning from Human Feedback 《基于人类反馈的强化学习入门》
rlhfbook.com/
本书面向具备语言建模、强化学习和机器学习基础知识的读者，系统解析了RLHF技术在语言模型后训练中的核心流程与实践方法。
本书围绕“模型训练-偏好数据收集-强化学习优化”三阶段，深入剖析奖励模型构建、策略梯度优化等关键技术，结合ChatGPT等典型案例，揭示RLHF如何通过人类反馈解决复杂目标对齐问题。内容涵盖从基础理论、数据采集到直接对齐算法等全流程，兼顾指令微调、拒绝采样等实用技巧。
AI创造营