备考书籍

评估与运维·考点精讲

评估与运维：测试集（分层）+ 自动评估（RAGAS/LLM 评审）+ 监控（时延/错误率/成本）+ 安全（注入/审查）+ 灰度回滚——“没有测试集的 AI 项目 = 每次改动都在赌博”。

章节: 2 章

从第 1 章开始读 →

📑 章节目录

01 第 1 章 · 评估体系：测试集、自动评估与回归测试集 3 层（核心/边界/对抗）+ 自动评估（相似度/LLM 评审/RAGAS）+ 人工抽查 + 回归流程——“改提示词/换模型/换切分必跑回归”。 🎯 6 题
02 第 2 章 · 生产运维：监控、安全、灰度与成本AI 服务监控 4 项（时延/错误率/吞吐/成本）+ SLO 设定 + 安全 3 道闸（输入过滤/输出审查/敏感确认）+ 灰度与回滚 + 成本治理——“保生产”的最后一环。 🎯 6 题