思想与社会2024 · 分享于 Hacker News

GaLore: Memory-Efficient LLM Training by Gradient Low-Rank Projection

探索《GaLore: Memory-Efficient LLM Training by Gradient Low-Rank Projection》的原文与 Hacker News 社区讨论,查看来源并加入阅读清单。

阅读原文

看看社区如何讨论这个想法。

来自 Hacker News 的原始讨论。不同的视角、疑问,以及值得继续思考的线索。

最多展示 100 条相关讨论。论文可能出现在评论中,并非原帖投稿内容。

在讨论中发现的引用

按 HN 条目顺序展示最近的 50 条引用来源。

Yveryluckyxyz ·

LoRA+: Efficient Low Rank Adaptation of Large Models

181 赞同47 评论
Yvictormustar ·

GaLore: Memory-Efficient LLM Training by Gradient Low-Rank Projection

6 赞同0 评论
Ysonabinu ·

GaLore: Memory-Efficient LLM Training by Gradient Low-Rank Projection

2 赞同0 评论
Ymau ·

GaLore: Memory-Efficient LLM Training by Gradient Low-Rank Projection

2 赞同0 评论
Yapsec112 ·

Gradient Low-Rank Projection (GaLore) reduces LLM training memory usage by 63%

1 赞同0 评论

一个想法,引向另一个。

发现更多论文