home link menu path
Garden
Search

    线性注意力 Attention

    • 线性注意力：Delta-Net
    • Lightning Attention
    • Mamba

    Author Houmin Wei

    Publish January 1, 0001

    LastMod August 27, 2026

    License 本作品采用 CC BY-NC-ND 4.0 许可协议进行许可，转载时请注明原文链接

    如果你在浏览博客的过程中发现了任何问题，欢迎在对应文章下评论。如果你有其他事情想要咨询，可以通过邮件联系我。

    Linked Mentions
    • Kimi K3 技术报告全文
    • Ling 与 Ring 2.6：给训好的万亿模型换一套注意力
    • LongCat-Flash-Thinking-2601 技术报告
    • MiniMax-M2 系列：小激活释放最大现实智能
    • Infra
    • 大模型架构大对比：从 DeepSeek V3 到 Gemma 4
    • Long Context
    混合精度训练：fp16 到 fp8 线性注意力：Delta-Net
    Table of Contents
    © 2022 – 2026 Powered by Hugo & Cosmos