Concepts
采样
让您的服务器请求 LLM 的完成
采样是 MCP 的一个强大功能,允许服务器通过客户端请求 LLM 的完成,从而在保持安全和隐私的同时实现复杂的代理行为。
Claude 桌面客户端尚不支持 MCP 的此功能。
采样如何工作
采样流程遵循以下步骤:
- 服务器向客户端发送
sampling/createMessage
请求 - 客户端审查请求并可以修改它
- 客户端从 LLM 进行采样
- 客户端审查完成
- 客户端将结果返回给服务器
这种人机协作设计确保用户对 LLM 看到和生成的内容保持控制。
消息格式
采样请求使用标准化的消息格式:
请求参数
消息
messages
数组包含要发送给 LLM 的对话历史。每条消息具有:
role
:可以是 “user” 或 “assistant”content
:消息内容,可以是:- 具有
text
字段的文本内容 - 具有
data
(base64)和mimeType
字段的图像内容
- 具有
模型偏好
modelPreferences
对象允许服务器指定其模型选择偏好:
-
hints
:模型名称建议数组,客户端可以使用这些建议选择合适的模型:name
:可以匹配完整或部分模型名称的字符串(例如 “claude-3”、“sonnet”)- 客户端可以将提示映射到不同提供商的等效模型
- 多个提示按优先顺序评估
-
优先级值(0-1 归一化):
costPriority
:最小化成本的重要性speedPriority
:低延迟响应的重要性intelligencePriority
:高级模型能力的重要性
客户端根据这些偏好和其可用模型做出最终模型选择。
系统提示
可选的 systemPrompt
字段允许服务器请求特定的系统提示。客户端可以修改或忽略此提示。
上下文包含
includeContext
参数指定要包含的 MCP 上下文:
"none"
:不包含额外上下文"thisServer"
:包含来自请求服务器的上下文"allServers"
:包含来自所有连接的 MCP 服务器的上下文
客户端控制实际包含的上下文。
采样参数
使用以下参数微调 LLM 采样:
temperature
:控制随机性(0.0 到 1.0)maxTokens
:生成的最大令牌数stopSequences
:停止生成的序列数组metadata
:额外的提供商特定参数
响应格式
客户端返回一个完成结果:
示例请求
以下是请求客户端采样的示例:
最佳实践
实现采样时:
- 始终提供清晰、结构良好的提示
- 适当地处理文本和图像内容
- 设置合理的令牌限制
- 通过
includeContext
包含相关上下文 - 在使用响应之前验证它们
- 优雅地处理错误
- 考虑对采样请求进行速率限制
- 文档化预期的采样行为
- 使用各种模型参数进行测试
- 监控采样成本
人机协作控制
采样设计考虑了人类监督:
对于提示
- 客户端应向用户显示建议的提示
- 用户应能够修改或拒绝提示
- 系统提示可以被过滤或修改
- 上下文包含由客户端控制
对于完成
- 客户端应向用户显示完成
- 用户应能够修改或拒绝完成
- 客户端可以过滤或修改完成
- 用户控制使用的模型
安全考虑
实现采样时:
- 验证所有消息内容
- 清理敏感信息
- 实施适当的速率限制
- 监控采样使用情况
- 在传输中加密数据
- 处理用户数据隐私
- 审计采样请求
- 控制成本暴露
- 实施超时
- 优雅地处理模型错误
常见模式
代理工作流程
采样启用代理模式,如:
- 读取和分析资源
- 基于上下文做出决策
- 生成结构化数据
- 处理多步骤任务
- 提供交互式帮助
上下文管理
上下文的最佳实践:
- 请求最少必要的上下文
- 清晰地结构化上下文
- 处理上下文大小限制
- 根据需要更新上下文
- 清理过时的上下文
错误处理
健壮的错误处理应:
- 捕获采样失败
- 处理超时错误
- 管理速率限制
- 验证响应
- 提供后备行为
- 适当地记录错误
限制
注意这些限制:
- 采样取决于客户端能力
- 用户控制采样行为
- 上下文大小有限制
- 可能适用速率限制
- 应考虑成本
- 模型可用性各不相同
- 响应时间各不相同
- 并非所有内容类型都受支持