AI 最佳实践总览
这一章给你一套可执行的主框架,避免"会用模型,但系统不稳定"的常见问题。
本章默认以两个核心角色展开:
- 开发者:关注可实现性、稳定性、性能、成本。
- 产品经理:关注业务目标、体验质量、风险与上线策略。
一张图看落地闭环
文档导航
核心实践
| 文档 | 说明 | 适用角色 |
|---|---|---|
| 提示词设计 | 提示词设计原则和技巧 | 开发者、产品经理 |
| 上下文与 RAG | RAG 架构和优化策略 | 开发者 |
| 评测与迭代 | 评测体系和迭代流程 | 开发者、产品经理 |
| 安全与治理 | 安全防护和合规要求 | 开发者、产品经理 |
| 工程落地手册 | 从 Demo 到生产的工程实践 | 开发者 |
Agent 设计
| 文档 | 说明 | 适用角色 |
|---|---|---|
| Agent 设计模式 | ReAct、Reflexion、Plan-Execute 等核心模式 | 开发者 |
| 多 Agent 协作 | 多 Agent 协作和冲突治理 | 开发者 |
| 函数调用与工具使用 | 函数调用和工具集成最佳实践 | 开发者 |
工程实践
| 文档 | 说明 | 适用角色 |
|---|---|---|
| 上下文管理 | 上下文窗口管理和优化 | 开发者 |
| 流式响应处理 | 流式响应的实现和优化 | 开发者 |
| 错误处理与容错 | 错误处理、重试、降级策略 | 开发者 |
| 模型选择与路由 | 模型选择策略和智能路由 | 开发者 |
| 成本优化策略 | Token 优化、缓存、成本监控 | 开发者、产品经理 |
| 可观测性与监控 | 指标、日志、告警、仪表板 | 开发者、运维 |
数据与模型
| 文档 | 说明 | 适用角色 |
|---|---|---|
| 数据处理与标注 | 数据采集、清洗、标注、验证、增强 | 开发者、产品经理 |
| 模型微调 | 微调决策、LoRA、训练监控、评估 | 开发者 |
多模态处理
| 文档 | 说明 | 适用角色 |
|---|---|---|
| 多模态处理 | 图像、音频、视频处理与融合 | 开发者 |
快速实践
| 文档 | 说明 | 适用角色 |
|---|---|---|
| 最快最简单的 RAG | 本地 RAG 快速实现 | 开发者 |
| AI 编程工具生态 | AI 编辑器、补全工具、Cursor Rules | 开发者 |
| 可复用提示词模板 | 18 个实用提示词模板 | 开发者、产品经理 |
| 常见问题 FAQ | AI 工程常见问题解答 | 开发者、产品经理 |
协作流程
| 文档 | 说明 | 适用角色 |
|---|---|---|
| 角色驱动交付链路 | 开发者与产品经理协作流程 | 开发者、产品经理 |
| 开发者与产品经理协作 | Agent 工程协作地图 | 开发者、产品经理 |
团队常见失误
- 直接上生产,没有评测基线。
- 只调提示词,不调数据与工具。
- 指标只看"回答看起来不错",不看任务级 KPI。
- 安全只靠单点过滤,没有全链路防护。
- 没有成本监控,预算超支。
- 错误处理不完善,系统不稳定。
成熟度分级
| 等级 | 名称 | 特征 | 关键能力 |
|---|---|---|---|
| L1 | 原型 | 能跑通 Demo,但结果不稳定 | 基础提示词、简单 RAG |
| L2 | 可用 | 有最小评测集和错误分类 | 评测体系、错误分类 |
| L3 | 可靠 | 有回归测试、灰度、监控与告警 | 自动评测、监控告警、回滚机制 |
| L4 | 规模化 | 多模型路由、成本优化、治理流程完善 | 智能路由、成本优化、安全治理 |
角色驱动主线
从"按主题阅读"升级到"按角色协作阅读",建议先看:
在这页里,你可以看到每个阶段里开发者与产品经理分别该产出什么,以及如何交接。
推荐阅读路径
开发者优先
text
提示词设计 → 上下文与 RAG → Agent 设计模式 → 函数调用
│ │ │ │
↓ ↓ ↓ ↓
评测体系 → 工程落地 → 流式响应 → 错误处理
│ │ │ │
↓ ↓ ↓ ↓
安全治理 → 成本优化 → 模型路由 → 监控告警产品经理优先
text
角色驱动链路 → 评测与迭代 → 安全与治理 → 成本优化
│ │ │ │
↓ ↓ ↓ ↓
提示词模板 → FAQ → 工程落地手册快速入门
text
最快 RAG → 提示词模板 → FAQ → 工程落地手册下一步
- 开发者优先:角色驱动交付链路 → 多 Agent 协作 → Agent 设计模式 → 工程落地手册
- 产品经理优先:角色驱动交付链路 → 评测与迭代 → 安全与治理 → 成本优化
- 遇到问题先看:常见问题 FAQ
