学术搜索 · AI 审稿 · LaTeX 协作
9000 余条 LLM 回答出现“规范冲突坍缩”标度,但标注者 κ 仅约 0.045
学术圈重大事件 · 发布 2026-08-21T13:40:00+08:00 · 更新 2026-08-21T13:45:36+08:00
核心结论
Communications AI & Computing 8 月 21 日分析 60 个规范冲突情境和 9000 余条 LLM 回答,提出坍缩概率随采样方差变化的 Kramers 式标度,并发现冲突越强、人格提示扰动越大,回答越容易失去语境一致性。不过三名标注者平均 Cohen κ 仅约 0.045,结果更适合作为评测假设和开放框架,不能当作普适对齐定律。
Communications AI & Computing 8 月 21 日发表一项大语言模型规范冲突研究。作者把“解释坍缩”定义为模型在隐私与安全、诚实与情感保护、程序公平与结果公平等价值拉扯中,出现自相矛盾、丢失具体语境、退回空泛安慰,或以不回应问题的拒绝替代权衡。研究目标不是再给一个总准确率,而是询问:冲突强度、采样温度与提示扰动改变时,这类失败是否出现可预测的概率曲线。
实验选取 60 个情境,按冲突程度分为 5 级,在 GPT-4o、LLaMA-3 v3.1 和一个匿名商业模型等测试族上改变温度、top-k 与 nucleus sampling,并加入“垃圾人格提示注入”(JPPI)扰动。完整生成语料超过 9000 条回答,其中 1500 条唯一回答进入三人标注,形成 4500 个二元坍缩标签。作者报告,5 级冲突相对 1 级的坍缩优势比超过 4;在中等冲突下,极端 JPPI 使坍缩优势比增加一倍以上。
论文用 Kramers 式关系 lnλ=mσ⁻²+b 拟合坍缩概率与有效采样方差,并称不同测试架构的斜率在统计上难以区分;再以每词元熵重新参数化,提出一个更容易坍缩的“熵走廊”。这可以启发安全评测从单一温度、单一提示的通过率,转向绘制冲突强度与采样设置下的失效面。但作者反复强调,这只是现象学标度,不是说神经网络真的遵循物理热力学,也不是跨所有模型成立的普适常数。
最重要的边界来自标注本身:三组两两 Cohen κ 仅约 0.04—0.05,均值约 0.045,原始一致率约 0.57;0—3 级严重度的 Krippendorff α 约 0.011。作者认为价值判断本来就没有单一真值,并采用保守多数与仲裁规则,但如此低的一致性意味着“坍缩”测量会显著受操作定义和评审者影响。对模型开发者,这项工作更适合作为可复现实验框架和假设生成器;在更广提示集、不同文化判断、盲化独立复标和新模型上重现前,不宜把公式用于合规阈值或产品安全承诺。
信息来源
可信度说明
来源为开放获取、同行评议论文,60 个情境、9000 余条回答、1500 条复标样本及标度拟合均可由全文核验。平均 κ 约 0.045、严重度 α 约 0.011,说明核心标签高度依赖评审判断;公式仅是测试模型族和数据集内的现象学关联,并非普适安全定律。
同主题情报
- 动物所 / `Cell`:`disc-Gastruloid` 首次把人类原条形成推进到可空间重构、可延长培养的体外模型
中国科学院 `2026-07-08` 官方稿显示,团队构建的人类 `disc-Gastruloid` 在 `72` 小时共培养后形成类原条样区域,延长培养后超 `80%` 继续发育为轴向不对称三维胚胎样结构,分出 `14` 类细胞群并与着床后 `21` 天天然胚胎较高相似。它的重要性,在于把人类原肠运动这个长期难直接观察的发育“黑箱”推进到可重复、可操控的体...
- 银河系最快恒星逼近中心黑洞:峰值约每秒 2.5 万公里,或可测量自旋
Science 与美联社 8 月 19 日报道,甚大望远镜数据识别出银河系内迄今已知速度最快的恒星:峰值约每秒 2.5 万公里,绕人马座 A* 一周约 8.7 年,且比此前纪录保持者更接近黑洞。长期高精度跟踪可能约束银河系中心黑洞自旋,但当前只是发现和轨道测量起点,尚未得到自旋值。
- 嫦娥七号以四器协同搜寻月球南极水冰,跳跃探测器瞄准永久阴影区
Science 8 月 19 日更新嫦娥七号任务:轨道器、着陆器、巡视器和跳跃探测器将在鹊桥二号支持下调查月球南极水冰与挥发物,四平台合计 18 项载荷,并计划让跳跃探测器进入永久阴影坑现场分析。公开资料仍只给出 2026 年下半年发射口径,最终日期、落点与工程参数需以官方通告为准。
- M87 黑洞第一次有了双频“体检图”,研究者开始按位置读等离子体状态
中国科学院 2026-07-28 08:18 发布官方稿,介绍上海天文台团队把 1.3 毫米和 3.5 毫米两张 M87 黑洞视界尺度图像合起来,首次做出空间分辨的谱指数分布。简单说,这不只是把黑洞拍得更清楚,而是开始按位置判断视界附近等离子体在不同半径上更接近“自吸收很强的厚辐射”还是“更容易透出的薄辐射”。关键转折出现在距黑洞中心约 30 微角秒处,并与...
- Moderna mRNA 流感疫苗获批,确诊病例相对标准疫苗减少 26.6%
Nature 8 月 13 日梳理 Moderna 的 mRNA 流感疫苗 mFLUSIVA:FDA 于 8 月 5 日批准其用于 50–64 岁成人,并对 65 岁以上人群给予加速批准,计划进入美国 2026–27 流感季。超过 4 万人的试验中,mRNA 组 2% 出现实验室确诊流感,对照标准疫苗组为 2.8%,相对减少 26.6%;常见不良反应多为轻中...
- KIST 公布 A²SG 训练方法,以自适应非对称梯度改善深层脉冲神经网络
KIST 8 月 10 日公布已获 ICML 2026 接收的 A²SG 训练方法,用自适应窗口和非对称代理梯度缓解深层脉冲神经网络的梯度变化与时间不一致。机构称该方法在 ImageNet 等任务提高准确率且训练开销低于所比较基线;论文与代码可查,但相对能耗和商业化前景仍需独立复现及真实神经形态硬件验证。