RLHF 技术 EN:Reinforcement Learning from Human Feedback 别名:人类反馈强化学习、基于人类反馈的强化学习 发布:2026-08-13 浏览:0 收藏 摘要 RLHF 是利用人类偏好反馈训练奖励模型并用强化学习优化语言模型的对齐方法。 展开▾ 概述RLHF 先收集人类对模型输出的排序偏好,训练奖励模型,再以近端策略优化(PPO)等算法微调语言模型使其输出更符合人类价值。 齐e慧享 意义该方法显著提升模型的有用性、真实性与安全性,是大模型对齐的核心技术。 齐e慧享 参考资料 [1] InstructGPT 论文 强化学习 对齐 偏好学习 大语言模型 相关词条 GPT-4 ChatGPT 指令微调 RLHF 强化学习 奖励模型 PPO 策略梯度 语言模型 对齐 发现内容有误或想补充资料? 贡献新词条 词条编辑指南 我要投稿(进入审核)