学术搜索 · AI 审稿 · LaTeX 协作
KIST 公布 A²SG 训练方法,以自适应非对称梯度改善深层脉冲神经网络
学术圈重大事件 · 发布 2026-08-11T16:26:59+08:00 · 更新 2026-08-11T17:17:27+08:00
核心结论
KIST 8 月 10 日公布已获 ICML 2026 接收的 A²SG 训练方法,用自适应窗口和非对称代理梯度缓解深层脉冲神经网络的梯度变化与时间不一致。机构称该方法在 ImageNet 等任务提高准确率且训练开销低于所比较基线;论文与代码可查,但相对能耗和商业化前景仍需独立复现及真实神经形态硬件验证。
韩国科学技术研究院(KIST)8 月 10 日公布 A²SG(Adaptive and Asymmetric Surrogate Gradients)训练方法,论文已被 ICML 2026 接收并于 7 月 7 日在首尔会议现场展示。该工作针对深层脉冲神经网络难以直接使用常规反向传播的问题:脉冲事件不可微,代理梯度又容易形成尖锐损失景观和时间方向不一致,使 SNN 的准确率、收敛和扩展规模长期落后于常规深度网络。
A²SG 把两个调整放进同一代理梯度框架。自适应部分按训练状态调整有效窗口,以降低空间梯度变化并保持时间方向一致;非对称部分依据神经元膜电位分配不同梯度,使更接近放电阈值的神经元获得更强更新。arXiv 摘要显示,团队在 CNN 与 Transformer 型 SNN 上测试图像分类、神经形态数据集和分割任务,并把更平坦的损失区域与泛化改进联系起来;代码仓库也已由论文页面公开。
机构新闻稿进一步称,方法用于 Transformer 架构的大规模 SNN 后,在 ImageNet 识别上提高准确率,训练计算开销约为其所比较的 Google 方法的六分之一,并在不同规模模型和任务上保持改善。若这些结果能被复现,影响对象不仅是神经形态芯片研究者,也包括需要在手机、可穿戴设备、无人机和常开传感器上运行模型的工程团队,因为方法只改训练软件,不要求先更换硬件。
仍需区分论文结果与机构外推。arXiv 版本证明了方法、实验范围、ICML 接收状态和开源代码,但“世界领先”“走向商业化”等表述来自 KIST 新闻稿;具体能耗优势还取决于硬件、脉冲稀疏度、模型规模和基线实现。后续应看 PMLR 最终版本、第三方复现实验,以及真实神经形态芯片上能耗和延迟是否同时改善。
信息来源
可信度说明
事实由 KIST 机构新闻稿和 arXiv 论文页面交叉核验,arXiv 明确标注“Accepted at ICML 2026”并提供摘要、作者与代码链接。论文仍是 5 月提交的 v1 预印本,新闻稿中的相对计算开销和产业化判断尚需最终论文细节与独立复现支持。
同主题情报
- 动物所 / `Cell`:`disc-Gastruloid` 首次把人类原条形成推进到可空间重构、可延长培养的体外模型
中国科学院 `2026-07-08` 官方稿显示,团队构建的人类 `disc-Gastruloid` 在 `72` 小时共培养后形成类原条样区域,延长培养后超 `80%` 继续发育为轴向不对称三维胚胎样结构,分出 `14` 类细胞群并与着床后 `21` 天天然胚胎较高相似。它的重要性,在于把人类原肠运动这个长期难直接观察的发育“黑箱”推进到可重复、可操控的体...
- 银河系最快恒星逼近中心黑洞:峰值约每秒 2.5 万公里,或可测量自旋
Science 与美联社 8 月 19 日报道,甚大望远镜数据识别出银河系内迄今已知速度最快的恒星:峰值约每秒 2.5 万公里,绕人马座 A* 一周约 8.7 年,且比此前纪录保持者更接近黑洞。长期高精度跟踪可能约束银河系中心黑洞自旋,但当前只是发现和轨道测量起点,尚未得到自旋值。
- 嫦娥七号以四器协同搜寻月球南极水冰,跳跃探测器瞄准永久阴影区
Science 8 月 19 日更新嫦娥七号任务:轨道器、着陆器、巡视器和跳跃探测器将在鹊桥二号支持下调查月球南极水冰与挥发物,四平台合计 18 项载荷,并计划让跳跃探测器进入永久阴影坑现场分析。公开资料仍只给出 2026 年下半年发射口径,最终日期、落点与工程参数需以官方通告为准。
- M87 黑洞第一次有了双频“体检图”,研究者开始按位置读等离子体状态
中国科学院 2026-07-28 08:18 发布官方稿,介绍上海天文台团队把 1.3 毫米和 3.5 毫米两张 M87 黑洞视界尺度图像合起来,首次做出空间分辨的谱指数分布。简单说,这不只是把黑洞拍得更清楚,而是开始按位置判断视界附近等离子体在不同半径上更接近“自吸收很强的厚辐射”还是“更容易透出的薄辐射”。关键转折出现在距黑洞中心约 30 微角秒处,并与...
- Moderna mRNA 流感疫苗获批,确诊病例相对标准疫苗减少 26.6%
Nature 8 月 13 日梳理 Moderna 的 mRNA 流感疫苗 mFLUSIVA:FDA 于 8 月 5 日批准其用于 50–64 岁成人,并对 65 岁以上人群给予加速批准,计划进入美国 2026–27 流感季。超过 4 万人的试验中,mRNA 组 2% 出现实验室确诊流感,对照标准疫苗组为 2.8%,相对减少 26.6%;常见不良反应多为轻中...
- GNN-LS 用可靠性双重指导与多视图整合,缓解低标签图节点分类
ACM TKDD 提出 GNN-LS,用依据预测可靠性的双重指导策略从未标注节点补充监督,以正则项减少监督与自监督信息冗余,再按数据集和标签率整合多个图视角;论文在七个基准数据集上报告显著提升。方法回应真实图任务标签稀缺,但摘要未给出逐项增益、开销、代码和分布漂移结果,部署价值仍需复现。