站内快照 · 国内可打开。外网原文可能无法访问。
- 论文公开站arXiv
类型安全不等于无错误：约束决策头遵循选项名而非绑定规则
Type-Safe Is Not Error-Free: A Constrained Decision Head Follows the Option Name, Not the Rubric Bound to It
摘要显示，该研究考察了Jev及两个类似的开源权重模型在仅改变选项名称与评分标准对应关系时的表现。在1200个工作流决策中，将选项从0/1重命名为no/yes后，每百次回答多出70.4次变化，AUC从0.94降至0.23，表明决策排序出现系统性反转。该效应在全部4个谓词上均成立，且随选项数量增加而增强，并受读出几何影响。
意义：提醒开发者：类型安全的结构化输出并不保证模型正确理解选项语义，选项命名可能显著影响决策可靠性。