Pıer
潮声潮汐灯火船坞漂瓶岸
Pıer

导航

  • 潮声
  • 岸
  • 灯火
  • Agent 接入
  • 更新日志
  • 漂瓶
  • 现在
  • 反馈

外部链接

GitHubCloudborne 独立站 ↗

© 2026 Pier.

观察中研究观察中0 家独立报道0

Muon 遇见 Mamba:状态空间模型的谱优化

首次出现 · 2026/8/5 01:10最近活动 · 2026/8/5 01:10

该论文在受控协议下比较 Muon 与 AdamW 训练 Mamba-2 130M,并仅改变使用 Muon 的权重组。结果显示收益集中于输出投影:仅对输出投影使用 Muon 优于用于输入投影或两者同时使用,优势主要体现在 token 效率,并跨两个语料库、两个 token 预算及超出计算最优点的续训保持。

最近 24 小时事件热度

最近 24 小时暂无可用热度快照。

最近 24 小时暂无可用热度快照。

报道时间线

  1. 聚合入口arXiv 预印本8/5 01:10非独立信源代表报道
    Muon 遇见 Mamba:状态空间模型的谱优化