‹ arXiv cs.LG

对齐税分级:具有 SFT 保留的长度归一化 DPO 下的任务选择性能力损失

原文:The Alignment Tax Is Graded: Task-Selective Capability Loss Under Length-Normalized DPO with SFT Retention

arXiv cs.LG 未缓存正文

环境。这是一项实证表征研究;我们没有提出新方法,也没有与替代目标进行比较。我们使用稀疏 LoRA 和长度归一化 DPO 以及 SFT 保留期限(RPO 目标)对结构化财务归档任务进行微调 Qwen3.5-4B,并随着隐性奖励边际增长到 $\sim 7$ $β$ 规模单位(nf4 训练;$\

正在把原文抓到本机服务器…首次约 3~8 秒,抓好后本站永久缓存,下次秒开。

抓不到时可直接看原文(部分站点需要登录/反爬,服务器也无法抓取)。

打开原文 ↗

正文由本站服务器抓取保存(已自动过滤广告、推荐位与追踪图片),排版与原站可能不同;版权归原站所有。

相关报道同一事件 / 同分类