AI工具人
提示词工程师

Agent设计模式——术语表

基本概念

提示词(Prompt):提示词是用户提供给 AI 模型的输入,通常以问题、指令或陈述的形式出现,用于引发响应。提示词的质量和结构极大地影响模型的输出,使提示词工程成为有效使用 AI 的关键技能。

上下文窗口(Context Window):上下文窗口是 AI 模型一次可以处理的最大 token 数量,包括输入和生成的输出。这个固定大小是一个关键限制,因为窗口外的信息会被忽略,而更大的窗口可以实现更复杂的对话和文档分析。

上下文学习(In-Context Learning):上下文学习是 AI 直接从提示词中提供的示例学习新任务的能力,无需任何重新训练。这个强大的功能允许单个通用模型即时适应无数特定任务。

零样本、单样本和少样本提示(Zero-Shot, One-Shot, & Few-Shot Prompting):这些是提示技术,其中向模型提供零个、一个或几个任务示例来指导其响应。提供更多示例通常有助于模型更好地理解用户意图,并提高特定任务的准确性。

多模态性(Multimodality):多模态性是 AI 理解和处理多种数据类型(如文本、图像和音频)信息的能力。这允许更多样化和类人的交互,例如描述图像或回答口头问题。

基础化(Grounding):基础化是将模型输出连接到可验证的真实世界信息源的过程,以确保事实准确性并减少幻觉。这通常通过 RAG 等技术实现,使 AI 系统更值得信赖。

核心 AI 模型架构

Transformers:Transformer 是大多数现代 LLM 的基础神经网络架构。其关键创新是自注意力机制,可以高效处理长文本序列并捕获单词之间的复杂关系。

循环神经网络(Recurrent Neural Network, RNN):循环神经网络是 Transformer 之前的基础架构。RNN 按顺序处理信息,使用循环来维护先前输入的"记忆",这使它们适合文本和语音处理等任务。

专家混合(Mixture of Experts, MoE):专家混合是一种高效的模型架构,其中"路由器"网络动态选择一小部分"专家"网络来处理任何给定的输入。这允许模型拥有大量参数,同时保持可管理的计算成本。

扩散模型(Diffusion Models):扩散模型是擅长创建高质量图像的生成模型。它们通过向数据添加随机噪声,然后训练模型精确地逆转该过程来工作,允许它们从随机起点生成新颖的数据。

Mamba:Mamba 是一种最新的 AI 架构,使用选择性状态空间模型(SSM)以高效率处理序列,特别是对于非常长的上下文。其选择性机制允许它专注于相关信息同时过滤噪声,使其成为 Transformer 的潜在替代方案。

LLM 开发生命周期

强大语言模型的开发遵循明确的顺序。它始于预训练(Pre-training),在大量通用互联网文本数据集上训练大规模基础模型,以学习语言、推理和世界知识。接下来是微调(Fine-tuning),这是一个专业化阶段,在较小的特定任务数据集上进一步训练通用模型,以使其能力适应特定目的。最后阶段是对齐(Alignment),调整专业化模型的行为,以确保其输出有帮助、无害且与人类价值观保持一致。

预训练技术:预训练是模型从大量数据中学习通用知识的初始阶段。这方面的顶级技术涉及模型学习的不同目标。最常见的是因果语言建模(CLM),其中模型预测句子中的下一个单词。另一种是掩码语言建模(MLM),其中模型填充文本中故意隐藏的单词。其他重要方法包括去噪目标,其中模型学习将损坏的输入恢复到其原始状态,对比学习,其中它学习区分相似和不相似的数据片段,以及下一句预测(NSP),其中它确定两个句子是否在逻辑上相互跟随。

微调技术:微调是使用较小的专业化数据集将通用预训练模型适应特定任务的过程。最常见的方法是监督微调(SFT),其中模型在标记的正确输入输出对示例上进行训练。一个流行的变体是指令调优,专注于训练模型更好地遵循用户命令。为了使此过程更高效,使用参数高效微调(PEFT)方法,顶级技术包括 LoRA(低秩适应),仅更新少量参数,以及其内存优化版本 QLoRA。另一种技术,检索增强生成(RAG),通过在微调或推理阶段将模型连接到外部知识源来增强模型。

对齐和安全技术:对齐是确保 AI 模型行为与人类价值观和期望保持一致的过程,使其有帮助且无害。最突出的技术是基于人类反馈的强化学习(RLHF),其中在人类偏好上训练的"奖励模型"指导 AI 的学习过程,通常使用近端策略优化(PPO)等算法来保持稳定性。已经出现了更简单的替代方案,例如直接偏好优化(DPO),它绕过了对单独奖励模型的需求,以及 Kahneman-Tversky 优化(KTO),它进一步简化了数据收集。为确保安全部署,实施护栏作为最终安全层,以实时过滤输出并阻止有害行为。

增强 AI Agent 能力

AI Agent 是能够感知其环境并采取自主行动以实现目标的系统。它们的有效性通过强大的推理框架得到增强。

思维链(Chain of Thought, CoT):这种提示技术鼓励模型在给出最终答案之前逐步解释其推理。这种"大声思考"的过程通常会在复杂推理任务上产生更准确的结果。

思维树(Tree of Thoughts, ToT):思维树是一种高级推理框架,其中 Agent 同时探索多个推理路径,就像树上的分支一样。它允许 Agent 自我评估不同的思路并选择最有希望的路径,使其在复杂问题解决方面更有效。

ReAct(推理与行动,Reason and Act):ReAct 是一个 Agent 框架,在循环中结合推理和行动。Agent 首先"思考"要做什么,然后使用工具采取"行动",并使用结果观察来通知其下一个想法,使其在解决复杂任务方面非常有效。

规划(Planning):这是 Agent 将高级目标分解为一系列较小的、可管理的子任务的能力。然后 Agent 创建一个计划来按顺序执行这些步骤,使其能够处理复杂的多步骤任务。

深度研究(Deep Research):深度研究是指 Agent 通过迭代搜索信息、综合发现和识别新问题来自主深入探索主题的能力。这允许 Agent 建立对主题的全面理解,远超单个搜索查询。

批评模型(Critique Model):批评模型是一种专门的 AI 模型,经过训练可以审查、评估和提供关于另一个 AI 模型输出的反馈。它充当自动批评者,有助于识别错误、改进推理并确保最终输出符合期望的质量标准。

术语索引

此术语索引使用 Gemini Pro 2.5 生成。提示词和推理步骤包含在末尾,以展示 AI 辅助索引创建的效率优势并用于教育目的。

A

  • A/B 测试 - 第 3 章:并行化
  • 行动选择 - 第 20 章:优先级排序
  • 适应 - 第 9 章:学习与适应
  • 自适应任务分配 - 第 16 章:资源感知优化
  • 自适应工具使用与选择 - 第 16 章:资源感知优化
  • Agent - 什么使 AI 系统成为 Agent?
  • Agent-计算机接口(ACIs)- 附录 B
  • Agent 驱动型经济 - 什么使 AI 系统成为 Agent?
  • Agent 作为工具 - 第 7 章:多 Agent 协作
  • Agent 卡片 - 第 15 章:Agent 间通信(A2A)
  • Agent Development Kit(ADK)- 第 2 章:路由,第 3 章:并行化,第 4 章:反思,第 5 章:工具使用,第 7 章:多 Agent 协作,第 8 章:内存管理,第 12 章:异常处理与恢复,第 13 章:人在回路中,第 15 章:Agent 间通信(A2A),第 16 章:资源感知优化,第 19 章:评估与监控,附录 C
  • Agent 发现 - 第 15 章:Agent 间通信(A2A)
  • Agent 轨迹 - 第 19 章:评估与监控
  • Agentic 设计模式 - 引言
  • Agentic RAG - 第 14 章:知识检索(RAG)
  • Agentic 系统 - 引言
  • AI 联合科学家 - 第 21 章:探索与发现
  • 对齐 - 术语表
  • AlphaEvolve - 第 9 章:学习与适应
  • 类比 - 附录 A
  • 异常检测 - 第 19 章:评估与监控
  • Anthropic's Claude 4 系列 - 附录 B
  • Anthropic's Computer Use - 附录 B
  • API 交互 - 第 10 章:模型上下文协议(MCP)
  • 工件 - 第 15 章:Agent 间通信(A2A)
  • 异步轮询 - 第 15 章:Agent 间通信(A2A)
  • 审计日志 - 第 15 章:Agent 间通信(A2A)
  • 自动化指标 - 第 19 章:评估与监控
  • 自动提示工程(APE)- 附录 A
  • 自主性 - 引言
  • A2A(Agent-to-Agent)- 第 15 章:Agent 间通信(A2A)

B

赞(2) 打赏
未经允许不得转载:XINDOO » Agent设计模式——术语表
描述文字

评论 抢沙发

觉得文章有用就打赏一下文章作者

非常感谢你的打赏,我们将继续给力更多优质内容,让我们一起创建更加美好的网络世界!

支付宝扫一扫

微信扫一扫