第 1 章 · AI 与机器学习基本概念
考点梳理
1.1 三个概念的关系(必背)
人工智能(AI)⊃ 机器学习(ML)⊃ 深度学习(DL)——大圈套小圈:
| 概念 | 含义 | 举例 |
|---|---|---|
| 人工智能(AI) | 让机器表现出“像人一样”的能力的总称 | 专家系统、规则引擎、机器学习都算 AI |
| 机器学习(ML) | 让机器从数据中自己找规律,而不是人写死规则 | 垃圾邮件分类、销量预测 |
| 深度学习(DL) | 机器学习的一支,用多层神经网络自动提取特征 | 图像识别、语音识别、大模型 |
记忆锚:“AI 是目标,机器学习是方法,深度学习是当前最有效的那类方法。”
与传统程序的区别(高频判断点):
| 对比 | 传统程序 | 机器学习 |
|---|---|---|
| 规则从哪来 | 人写死的 if-else | 从数据里学出来 |
| 输入 | 明确的规则 + 数据 | 大量数据 + 目标 |
| 改需求怎么办 | 改代码 | 重新标注/补数据/再训练 |
1.2 机器学习怎么学(三类学习方式)
| 类型 | 有没有“标准答案” | 典型任务 | 训练师参与度 |
|---|---|---|---|
| 监督学习 | 有标注(输入 + 正确答案) | 分类、回归、实体抽取、目标检测 | ★★★ 主战场(标注数据就是它的教材) |
| 无监督学习 | 没有标注 | 聚类、降维、异常发现 | ★☆☆(数据清洗与预处理) |
| 强化学习 | 没有标准答案,有奖励信号 | 游戏、机器人控制、策略优化 | ★☆☆(少见直接标注) |
监督学习再分两类:
- 分类:输出是类别(是/否、正面/负面、属于哪一类);
- 回归:输出是数值(价格、销量、分数)。
记忆锚:“有答案 = 监督,没答案 = 无监督,靠奖惩 = 强化。”
1.3 训练与推理(最容易混)
| 阶段 | 做什么 | 特点 |
|---|---|---|
| 训练 | 用数据调整模型参数,让它学会规律 | 耗时、耗算力、需要标注数据 |
| 推理 | 用训练好的模型对新数据出结果 | 快、面向用户、不再改参数 |
一句话:训练是“学”,推理是“用”——用户在用产品时,模型处于推理阶段。
1.4 数据集三分法(铁律最多的一节)
| 数据集 | 用途 | 铁律 |
|---|---|---|
| 训练集 | 让模型学 | 通常是最大的一份 |
| 验证集 | 调参数、选模型 | 用来做选择 |
| 测试集 | 考模型(最终评估) | ⚠️ 绝不能拿去调参——调过就不算“考”了 |
为什么测试集不能调参:一旦你根据测试集结果反复改模型/改参数,模型就“背下了考试题”,报出来的分数是虚高的(数据泄漏)。
记忆锚:“训练集学、验证集调、测试集考——考卷不能提前对答案。”
1.5 过拟合与欠拟合
| 现象 | 表现 | 通俗解释 | 常见对策 |
|---|---|---|---|
| 欠拟合 | 训练集和测试集都差 | 没学会 | 换更强的模型、补特征、加训练 |
| 过拟合 | 训练集很好、测试集差 | 背答案了 | 加数据、加正则、简化模型、清洗噪声 |
训练师视角:过拟合常常是“数据问题”——数据少、噪声多、标注错、分布单一。补高质量数据往往比调模型更有效。
1.6 训练师在 AI 链条里的位置
官方职业定义:使用智能训练软件,在人工智能产品实际使用过程中进行数据库管理、算法参数设置、人机交互设计、性能测试跟踪及其他辅助作业。
业务目标 → 数据采集 → 清洗 → 标注 → 质检 →(算法工程师训练模型)→ 参数/交互配置 → 评测 → 上线跟踪
└──────────── 训练师的主战场 ────────────┘ └── 训练师深度参与 ──┘
一句话定位:算法工程师负责“模型学得怎么样”,训练师负责“数据和评测是不是靠得住”——数据质量决定模型上限。
🧠 记忆工具箱
口诀速记
- 三者关系:“AI 是目标,机器学习是方法,深度学习是当前主力”;
- 三类学习:“有答案是监督,没答案是无监督,靠奖惩是强化”;
- 两阶段:“训练是学,推理是用”;
- 三分法:“训练集学,验证集调,测试集考”;
- 两拟合:“都差是欠拟合,训练好测试差是过拟合”;
- 一句话:“模型是学生,数据是教材,标注是批改,测试集是考卷。”
场景锚点
把机器学习想象成 “备考的学生”:
- 训练集 = 平时的练习题(用来学);
- 验证集 = 模拟考(用来调整复习策略);
- 测试集 = 期末考卷(只能考一次,提前做过就等于作弊);
- 过拟合 = 把练习册答案背下来了(练习全对,遇到新题就崩);
- 欠拟合 = 根本没学会(练习和考试都差);
- 标注员 = 批改练习册的人——批改批错了,学生一定学错。
训练师的位置:你不是出题老师(算法工程师),你是“保证教材和答案正确、并且组织模拟考”的教务——教材有错,再好的老师也教不出好学生。
⚠️ 易错提醒
- 错误认知:AI 就是深度学习 → 纠正:AI 范围最大,深度学习只是机器学习的一支;规则系统、专家系统也属 AI。
- 错误认知:机器学习就是写规则写得更聪明 → 纠正:机器学习的核心是从数据里学规律,不是人写死 if-else。
- 错误认知:训练集越大越好,数据不用挑 → 纠正:脏数据、错标注会被模型当成“正确答案”学进去——质量优先于数量。
- 错误认知:测试集表现不好,就拿测试集多调几轮 → 纠正:这是数据泄漏,会让分数虚高;调参要用验证集,测试集只用一次。
- 错误认知:模型效果差就是算法不行 → 纠正:先查数据——标注错、样本少、分布偏、噪声多,往往是主因。
- 错误认知:训练师不懂算法就没价值 → 纠正:训练师的价值在数据质量、规范与评测;“让模型有干净教材、有可信考卷”本身就是核心能力。