元语音
[浏览需要 0 积分] 发布于

《流形上的最速下降:5. 对偶梯度下降》

https://kexue.fm/archives/11388

这篇文章我们介绍了通过对偶梯度下降来寻找流形上的最速下降方向的思路,它也是前段时间 Thinking Machines Lab 的博客《Modular Manifolds》用来求解 Stiefel 流形上的 Muon 的方法。

浏览 (69)
点赞
收藏
评论