← 课程库
语言模型与架构模块二 · 基本定义概念11 分钟

大语言模型是什么:生成与理解两种范式

一句话定义,外加它和传统 NLP 模型的区别

学完这节你能:
  • 给出大语言模型的标准定义
  • 区分「生成」与「理解」两种核心范式
  • 说清大模型的优势与局限

大语言模型(LLM):基于 Transformer 架构、在海量文本上预训练、拥有大规模参数、能够理解并生成自然语言的模型。GPT、Llama、DeepSeek 都是代表。

  • 生成(Generation):续写、写作、翻译、写代码——产出新文本。
  • 理解(Understanding):分类、判断情感、抽取信息、问答——读懂已有文本。
  • 现代 LLM 用同一个模型、靠提示词就能同时做这两类任务。

🔑 和传统 NLP 模型的区别:传统模型往往一个任务训一个模型;LLM 一次预训练,靠提示与少量示例就能迁移到大量任务(这就是后面要讲的「上下文学习」涌现能力)。

✗ 常见误解✓ 正确理解
大模型完全不会产生偏见或错误。大模型会继承训练数据的偏见,也会产生「幻觉」——看似合理实则错误的内容。
卷积神经网络(CNN)是大语言模型的典型形式。CNN 主要用于图像;LLM 主要基于 Transformer。线性回归等传统模型也不算 LLM。
自测关于大语言模型的优势与局限,正确的是:
// 带走一句话

LLM = Transformer + 海量预训练 + 大参数,同时具备生成与理解;强在通用迁移,弱在幻觉与偏见。

独立练习

做到这些,才算完成本节

  1. 合上正文,用自己的话解释核心概念。
  2. 写出一个相似概念,并说明两者最关键的区别。
学习记录

记录本节阅读进度

建议先独立回答自测。读完记录不等于已经掌握。

继续下一课
← 上一课
分词与词元:BPE、词表、tokenization
下一课 →
四代语言模型:从 N-gram 到大模型

学完不要急着赶进度:去练习自测,或完成对应的阶段实验