2.2 GPT、LLaMA 与 MOE:自回归模型与混合专家架构演进
2.2 GPT、LLaMA 与 MOE自回归模型与混合专家架构演进基于《大规模语言模型从理论到实践第2版》第2章 大语言模型基础爆款小标题从 GPT 到 LLaMA 到 MOE主流架构差异与选型一张表搞定为什么这一节重要大模型产品与开源生态里最常见的就是「GPT 类」「LLaMA 类」和「MOE 类」模型。若不搞清楚它们在训练目标自回归 vs 掩码、架构细节归一化、激活、位置编码和使用场景上的差异很容易出现「用 BERT 做长文本生成」或「用纯 GPT 做句向量」这类错配。本节基于原书第 2 章系统讲清自回归解码器与掩码编码器的区别、LLaMA 的典型设计选择以及混合专家MOE的「路由 专家」思想与效率取舍并给出选型与部署时的实用要点。学习目标学完本节你将能够区分自回归与掩码模型说明自回归语言模型如 GPT、LLaMA与掩码语言模型如 BERT在训练目标与「训练时看到的上下文」上的本质不同以及各自更适合的下游任务类型。掌握 LLaMA 的典型设计说出 LLaMA 在归一化RMSNorm、激活函数SwiGLU、位置编码RoPE等方面的选择以及这些选择对训练稳定性与长上下文的影响。理解 MOE 的取舍解释混合专家模型中「路由 专家」的工作方式、在参数量与激活量上的特点以及部署时对显存与带宽的影响。一、自回归语言模型 vs 掩码语言模型原书第 2 章自回归语言模型Autoregressive LM训练目标在给定上文的前提下预测下一个 token或下一个词。损失通常是对整个序列的下一 token 交叉熵求和或平均。因此训练时每个位置「只能看到」它左侧的 token不能看到右侧通过因果掩码保证。典型架构解码器-onlyDecoder-only即只使用 Transformer 的解码器层带因果掩码的自注意力 前馈网络无「编码器」部分。使用方式天然适合生成——自左向右逐 token 生成直到结束符或达到最大长度。也可用于填空、续写、对话把历史与当前问题拼成序列让模型生成回复。代表GPT 系列、LLaMA、Qwen、DeepSeek 等。掩码语言模型Masked LM训练目标随机遮盖输入中的部分 token让模型根据**上下文含左右两侧**预测被遮盖的内容。每个位置在训练时可以看到整句除被 mask 的位置。典型架构编码器Encoder-only即双向自注意力无因果掩码 前馈网络。代表BERT、RoBERTa 等。使用方式适合理解与表示——取 [CLS] 或整句的池化表示做分类、相似度、检索等。也可做「填空」式生成但按 token 自回归长文本生成不是其设计重心且通常没有因果掩码直接用于生成会存在「看到未来」的泄露问题。本质区别小结训练时看到的上下文自回归只看左侧掩码看两侧除被 mask 处。更适合的任务自回归适合生成、对话、续写掩码适合分类、抽取、句表示、检索。若要做「长文本生成」或「对话生成」应选解码器架构若要做「句向量」或「文本分类」可考虑编码器或专门训练的嵌入模型而不是把纯生成模型最后一层隐状态直接当向量用。二、GPT 类与 LLaMA 的架构要点原书第 2 章GPT 类解码器-only、自回归原书第 2 章将 GPT 作为自回归解码器代表堆叠 Transformer 解码器块每块含因果自注意力 前馈训练目标为下一 token 预测。适合生成与对话也是当前 ChatGPT、开源对话模型的主流基座形态。LLaMA 的典型设计原书第 2 章LLaMA 在「用什么 Norm、什么激活、什么位置编码」上做了明确选择被后续很多开源模型沿用RMSNorm在 LayerNorm 基础上去掉均值项只做缩放计算更省、效果相当训练更稳定。SwiGLUFFN 的激活函数采用 SwiGLU及相应权重形状相比原始 ReLU FFN 表达力更强被多数新架构采用。RoPE位置编码采用旋转位置编码RoPE便于长上下文与长度外推与绝对位置编码相比更利于扩展。这些细节在阅读 LLaMA、Qwen、DeepSeek 等代码或配置时会反复出现选型与微调时保持与基座一致例如不要随意把 RMSNorm 换成 LayerNorm可减少训练不稳定或效果异常。工程上的对应纯生成/对话优先选解码器架构若需要「句向量」或「检索用嵌入」应选编码器或专门训练的嵌入模型而不是用生成模型的最后一层隐状态直接做相似度未经对比学习的隐状态通常不适合做检索。三、混合专家模型MOE思想与取舍原书第 2 章基本思想在部分层中不使用「一个大的前馈层」而是引入多份专家Expert子网络如多份 FFN并增加一个路由Router对每个 token路由决定它「走哪几个专家」例如选 top-1 或 top-2只对选中的专家做前向计算最后按路由权重合并输出。这样总参数量可以很大很多专家但单次前向激活的参数量只涉及被选中的少数专家从而在相近效果下降低计算与显存。典型数量关系原书第 2 章例如某 MOE 层有 8 个专家每个 token 选 2 个专家则前向时该层「参与计算」的参数量约为「一个全连接 FFN」的 2/8 1/4 的专家参数量若每个专家与原来单 FFN 同规模则约为原来的 2 倍 FFN 参数量但总参数是 8 倍。因此显存与计算更受「激活路径」影响而总参数会明显增大模型文件与加载时间会上升推理时还要考虑路由负载均衡避免总选同一两个专家与通信/带宽多卡时专家可能分布在不同设备。选型与部署注意点MOE 模型如 Mixtral在相同激活预算下可容纳更大总参数适合「要大能力又要控单次推理成本」的场景。部署时需关注路由是否均衡、多卡下专家通信、以及框架对 MOE 的优化如专家并行、通信重叠等。不要仅凭「参数量大」就认为一定更慢——要看激活量与实现。四、工程实战要点1. 按任务选架构纯生成/对话优先解码器架构GPT/LLaMA 类。需要句向量、检索、分类用编码器或专用嵌入模型不要用纯生成模型的隐状态直接当向量。既要生成又要理解可考虑 Encoder-Decoder 或「生成模型 单独嵌入模型」的组合。2. MOE 部署时关注路由与带宽对 Mixtral 等 MOE 模型要关注路由负载、显存占用与带宽可结合官方或社区文档做 batch size、并行方式的调优。五、常见误区与避坑指南误区一用 BERT 做长文本生成或用纯 GPT 做句向量架构与训练目标不匹配会导致效果差或行为异常。避坑生成用解码器、表示用编码器或专用嵌入模型。误区二认为 MOE 参数量大就一定更慢MOE 通过「稀疏激活」控制实际计算量推理时更吃带宽与路由实现。避坑以实测延迟与吞吐为准并关注框架对 MOE 的优化程度。误区三微调时随意改 Norm 或激活与基座不一致的 Norm/激活可能带来训练不稳定或效果下降。避坑与基座保持一致除非有明确实验支撑。六、小结与衔接本节区分了自回归与掩码语言模型、梳理了 GPT 类与 LLaMA 的架构要点RMSNorm、SwiGLU、RoPE并介绍了 MOE 的「路由 专家」思想及在参数量与激活量上的取舍。下一节将进入解码器结构的实现细节因果掩码、Pre-Norm 与 RMSNorm 在块中的位置便于读源码与做修改。课后思考题自回归语言模型和掩码语言模型在「训练时看到的上下文」上有什么本质不同各更适合什么类型的下游任务若某 MOE 层有 8 个专家、每 token 选 2 个专家该层前向时参与计算的参数大约是全连接时的多少这对显存和速度有什么影响

相关新闻

论文写作利器:16个AI网站推荐与技巧

论文写作利器:16个AI网站推荐与技巧

在 2025 年的学术环境中,毕业论文写作已成为学生面临的一大挑战。随着人工智能技术的飞速发展,AI 写作工具逐渐成为提升效率、保障质量的关键助手。本文将全面盘点 16款实用的 AI 论文写作网站,涵盖它们的功能、优势、使用技巧,并…

2026/5/17 7:25:31 阅读更多 →
毕业论文神器:16个AI写作工具使用指南

毕业论文神器:16个AI写作工具使用指南

在 2025 年的学术环境中,毕业论文写作已成为学生面临的一大挑战。随着人工智能技术的飞速发展,AI 写作工具逐渐成为提升效率、保障质量的关键助手。本文将全面盘点 16款实用的 AI 论文写作网站,涵盖它们的功能、优势、使用技巧,并…

2026/7/4 20:20:31 阅读更多 →
16个AI工具助力毕业论文,附实用方法

16个AI工具助力毕业论文,附实用方法

在 2025 年的学术环境中,毕业论文写作已成为学生面临的一大挑战。随着人工智能技术的飞速发展,AI 写作工具逐渐成为提升效率、保障质量的关键助手。本文将全面盘点 16款实用的 AI 论文写作网站,涵盖它们的功能、优势、使用技巧,并…

2026/7/6 7:24:24 阅读更多 →

最新新闻

SVG Gobbler:矢量资源管理的终极解决方案,彻底改变你的设计工作流

SVG Gobbler:矢量资源管理的终极解决方案,彻底改变你的设计工作流

SVG Gobbler:矢量资源管理的终极解决方案,彻底改变你的设计工作流 【免费下载链接】svg-gobbler Open source browser extension for finding, editing, exporting, optimizing, and managing SVG content. 项目地址: https://gitcode.com/gh_mirrors/…

2026/7/6 15:42:36 阅读更多 →
Unity Perception终极指南:如何快速生成高质量的合成数据集用于计算机视觉训练

Unity Perception终极指南:如何快速生成高质量的合成数据集用于计算机视觉训练

Unity Perception终极指南:如何快速生成高质量的合成数据集用于计算机视觉训练 【免费下载链接】com.unity.perception Perception toolkit for sim2real training and validation in Unity 项目地址: https://gitcode.com/gh_mirrors/co/com.unity.perception …

2026/7/6 15:40:34 阅读更多 →
原神启动器Plus:一键切换国服与国际服的桌面利器

原神启动器Plus:一键切换国服与国际服的桌面利器

原神启动器Plus:一键切换国服与国际服的桌面利器 【免费下载链接】Genshin.Launcher.Plus [原神启动器Plus] lightweight globalized Genshin Impact launcher. Support arbitrarily resolution ratio, account switching, client convertion, FPS unlocking and mo…

2026/7/6 15:40:34 阅读更多 →
如何用闲置安卓设备5步构建零成本家庭服务器?

如何用闲置安卓设备5步构建零成本家庭服务器?

如何用闲置安卓设备5步构建零成本家庭服务器? 【免费下载链接】amlogic-s9xxx-armbian Supports running Armbian on Amlogic, Allwinner, and Rockchip devices. Support a311d, s922x, s905x3, s905x2, s912, s905d, s905x, s905w, s905, s905l, rk3588, rk3568, …

2026/7/6 15:38:33 阅读更多 →
计算机Java毕设实战-基于前后端分离的病毒性疾病医药数据采集与分析系统的设计与实现 基于 SpringBoot 的冠状病毒靶标信息挖掘与数据整【完整源码+LW+部署说明+演示视频,全bao一条龙等】

计算机Java毕设实战-基于前后端分离的病毒性疾病医药数据采集与分析系统的设计与实现 基于 SpringBoot 的冠状病毒靶标信息挖掘与数据整【完整源码+LW+部署说明+演示视频,全bao一条龙等】

博主介绍:✌️码农一枚 ,专注于大学生项目实战开发、讲解和毕业🚢文撰写修改等。全栈领域优质创作者,博客之星、掘金/华为云/阿里云/InfoQ等平台优质作者、专注于Java、小程序技术领域和毕业项目实战 ✌️技术范围:&am…

2026/7/6 15:36:31 阅读更多 →
MultiOS-USB:一个U盘搞定所有操作系统安装与维护

MultiOS-USB:一个U盘搞定所有操作系统安装与维护

MultiOS-USB:一个U盘搞定所有操作系统安装与维护 【免费下载链接】MultiOS-USB Boot operating systems directly from ISO/WIM images 项目地址: https://gitcode.com/gh_mirrors/mu/MultiOS-USB 想象一下,您只需要一个U盘,就能随身携…

2026/7/6 15:36:31 阅读更多 →

日新闻

H2 与 MySQL 单元测试兼容性:5 个关键 SQL 语句差异与规避方案

H2 与 MySQL 单元测试兼容性:5 个关键 SQL 语句差异与规避方案

H2与MySQL单元测试兼容性:5个关键SQL语句差异与规避方案1. 单元测试中的数据库兼容性挑战在Java开发领域,单元测试是保证代码质量的重要环节。当应用涉及数据库操作时,测试环境的搭建往往成为开发者的痛点。H2数据库因其轻量级、内存模式和快…

2026/7/6 0:01:17 阅读更多 →
Windows任务栏终极清理指南:用RBTray一键隐藏窗口到系统托盘

Windows任务栏终极清理指南:用RBTray一键隐藏窗口到系统托盘

Windows任务栏终极清理指南:用RBTray一键隐藏窗口到系统托盘 【免费下载链接】rbtray A fork of RBTray from http://sourceforge.net/p/rbtray/code/. 项目地址: https://gitcode.com/gh_mirrors/rb/rbtray 你是否厌倦了Windows任务栏上密密麻麻的图标&…

2026/7/6 0:01:17 阅读更多 →
Visual C++ 运行时库一键安装终极指南:告别DLL缺失烦恼

Visual C++ 运行时库一键安装终极指南:告别DLL缺失烦恼

Visual C 运行时库一键安装终极指南:告别DLL缺失烦恼 【免费下载链接】vcredist AIO Repack for latest Microsoft Visual C Redistributable Runtimes 项目地址: https://gitcode.com/gh_mirrors/vc/vcredist 你是否曾经遇到过这样的情况:下载了…

2026/7/6 0:05:19 阅读更多 →

周新闻

B站视频下载神器BiliTools:5分钟学会轻松保存任何B站内容

B站视频下载神器BiliTools:5分钟学会轻松保存任何B站内容

B站视频下载神器BiliTools:5分钟学会轻松保存任何B站内容 【免费下载链接】BiliTools A cross-platform bilibili toolbox. 跨平台哔哩哔哩工具箱,支持下载视频、番剧等等各类资源 项目地址: https://gitcode.com/GitHub_Trending/bilit/BiliTools …

2026/7/6 8:11:50 阅读更多 →
威胁模型全解析:从新手入门到实战应用,助你构建安全产品!

威胁模型全解析:从新手入门到实战应用,助你构建安全产品!

威胁模型的陌生现状在忙碌疲惫的一天里,参与了关于混合后量子密码学的讨论,应付端点攻击找茬的人,还参与留言板讨论后,发现“威胁模型”对多数人仍是陌生概念,且多被当作时髦用语。有趣的相关画作有一幅由 Embyr 创作的…

2026/7/6 8:11:52 阅读更多 →
渗透测试入门指南:从零基础到实战环境搭建

渗透测试入门指南:从零基础到实战环境搭建

1. 从“看热闹”到“入门”:我理解的渗透测试到底是什么?每次看到新闻里说某个大公司的数据被“黑”了,或者某个网站被攻击导致服务瘫痪,你是不是和我一样,心里会冒出两个念头:一是“这黑客真厉害”&#x…

2026/7/6 6:52:56 阅读更多 →

月新闻