对齐税分级:具有 SFT 保留的长度归一化 DPO 下的任务选择性能力损失
原文:The Alignment Tax Is Graded: Task-Selective Capability Loss Under Length-Normalized DPO with SFT Retention
环境。这是一项实证表征研究;我们没有提出新方法,也没有与替代目标进行比较。我们使用稀疏 LoRA 和长度归一化 DPO 以及 SFT 保留期限(RPO 目标)对结构化财务归档任务进行微调 Qwen3.5-4B,并随着隐性奖励边际增长到 $\sim 7$ $β$ 规模单位(nf4 训练;$\
正在把原文抓到本机服务器…首次约 3~8 秒,抓好后本站永久缓存,下次秒开。
抓不到时可直接看原文(部分站点需要登录/反爬,服务器也无法抓取)。
正文由本站服务器抓取保存(已自动过滤广告、推荐位与追踪图片),排版与原站可能不同;版权归原站所有。