LLM Architecture 专题

共 2 篇文章，按时间倒序展示。

LLM 架构演进图谱：收敛还是分裂

LLM架构设计趋同（MoE、QK-Norm成标配），但技术路线分裂（MLA、Mamba、线性注意力混搭），核心是优化长上下文计算成本。

2026年03月19日TechFoco

Large Language Models LLM Architecture Attention Mechanism

LLM 架构演进图谱：收敛还是分裂

超越标准 LLM 的新兴架构解析

新兴LLM架构：线性注意力提升长序列效率，文本扩散加速生成，代码世界模型探索结构理解，小型递归变换器轻量高效。

2025年11月09日TechFoco

LLM Architecture Linear Attention Diffusion Models

超越标准 LLM 的新兴架构解析