当前位置: 首页 > news >正文

Bedrock Guardrails 新 API:不用创建资源,直接给 Agent 每一步加安全检查

Agent 应用跑起来之后,安全问题是这样的:

你的 Agent 可能在一次请求里跑 20-30 步(规划→调工具→处理结果→再规划→再调工具……)。每一步的风险不一样——用户输入那步要防注入,工具调用那步要防越权,输出那步要过滤敏感信息。

之前的 Bedrock Guardrails 需要你先创建一个 guardrail 资源、配好版本、绑到模型调用上。问题是:

  1. 一个 guardrail 配置很难覆盖所有步骤(每步风险不同)
  2. Agent 循环是动态的,你不知道它会跑多少步
  3. 管理多个 guardrail 版本很烦

现在新出的 InvokeGuardrailChecks API 换了个思路:不创建资源,每次调用时直接告诉它检查什么

这个 API 干什么的

一句话:你在 Agent 循环的任意位置插一个 API 调用,告诉它"帮我检查这段文本有没有XXX问题",它返回检测结果(含置信度分数),你自己决定怎么处理。

关键特性:

  • 无资源模式 —— 不需要创建 guardrail ID、不需要管版本
  • 检测模式 —— 只返回结果,不自动 block(你自己决定 block/pass/log)
  • 单项检查 —— 可以只跑"注入检测"不跑"内容过滤",按需组合
  • 数值分数 —— 返回 0-1 的置信度,不是简单的"通过/拒绝"

支持的检查类型

类型 检查项 用途
内容过滤 仇恨/暴力/色情/侮辱/不当行为 过滤有害输出
注入检测 Jailbreak / Prompt Injection / Prompt Leakage 防护用户输入攻击
敏感信息 PII 实体(姓名/电话/身份证/银行卡等) 防止数据泄露

在 Agent 循环里怎么用

import boto3
import jsonbedrock = boto3.client("bedrock-runtime", region_name="us-east-1")def check_prompt_attack(text: str) -> dict:"""检查用户输入是否有注入攻击"""response = bedrock.invoke_guardrail_checks(source="INPUT",content=[{"text": {"text": text}}],checks={"promptAttackCheck": {"attackTypes": ["JAILBREAK", "PROMPT_INJECTION", "PROMPT_LEAKAGE"]}})return response["results"]def check_content_safety(text: str) -> dict:"""检查模型输出是否有有害内容"""response = bedrock.invoke_guardrail_checks(source="OUTPUT",content=[{"text": {"text": text}}],checks={"contentFilter": {"categories": ["HATE", "VIOLENCE", "SEXUAL", "INSULTS", "MISCONDUCT"]}})return response["results"]def check_pii(text: str) -> dict:"""检查输出是否泄露了敏感信息"""response = bedrock.invoke_guardrail_checks(source="OUTPUT",content=[{"text": {"text": text}}],checks={"sensitiveInformationFilter": {"piiEntityTypes": ["PHONE", "EMAIL", "SSN", "CREDIT_CARD", "NAME"]}})return response["results"]

完整 Agent 循环示例

class SafeAgent:def __init__(self):self.bedrock = boto3.client("bedrock-runtime", region_name="us-east-1")self.max_steps = 20self.attack_threshold = 0.7self.content_threshold = 0.8self.pii_threshold = 0.9def run(self, user_input: str) -> str:# 第 1 步:检查用户输入input_check = self.check_input(user_input)if input_check["blocked"]:return f"请求被拒绝:{input_check['reason']}"messages = [{"role": "user", "content": user_input}]for step in range(self.max_steps):# 调用模型model_response = self.invoke_model(messages)# 第 2 步:检查模型输出安全性output_check = self.check_output(model_response)if output_check["blocked"]:return "抱歉,无法生成安全的回复。"# 如果模型要调工具if model_response.get("tool_use"):tool_result = self.execute_tool(model_response["tool_use"])# 第 3 步:检查工具返回结果是否有 PIIpii_check = self.check_pii_in_tool_output(tool_result)if pii_check["has_pii"]:tool_result = self.redact_pii(tool_result, pii_check)messages.append({"role": "tool", "content": tool_result})else:return model_response["text"]return "处理步骤超限,请简化你的请求。"def check_input(self, text: str) -> dict:response = self.bedrock.invoke_guardrail_checks(source="INPUT",content=[{"text": {"text": text}}],checks={"promptAttackCheck": {"attackTypes": ["JAILBREAK", "PROMPT_INJECTION"]}})results = response["results"]max_score = max((r.get("confidenceScore", 0) for r in results.get("promptAttackResults", [])),default=0)return {"blocked": max_score > self.attack_threshold,"reason": "检测到潜在的注入攻击" if max_score > self.attack_threshold else None,"score": max_score}def check_output(self, response: dict) -> dict:text = response.get("text", "")if not text:return {"blocked": False}check_response = self.bedrock.invoke_guardrail_checks(source="OUTPUT",content=[{"text": {"text": text}}],checks={"contentFilter": {"categories": ["HATE", "VIOLENCE", "SEXUAL", "INSULTS"]}})results = check_response["results"]max_score = max((r.get("severityScore", 0) for r in results.get("contentFilterResults", [])),default=0)return {"blocked": max_score > self.content_threshold}def check_pii_in_tool_output(self, tool_output: str) -> dict:response = self.bedrock.invoke_guardrail_checks(source="OUTPUT",content=[{"text": {"text": tool_output}}],checks={"sensitiveInformationFilter": {"piiEntityTypes": ["PHONE", "EMAIL", "SSN", "CREDIT_CARD"]}})results = response["results"]pii_entities = results.get("sensitiveInformationResults", [])return {"has_pii": len(pii_entities) > 0,"entities": pii_entities}def redact_pii(self, text: str, pii_check: dict) -> str:"""把检测到的 PII 替换成占位符"""for entity in pii_check["entities"]:text = text.replace(entity["match"], f"[{entity['type']}]")return text

和原有 Guardrails 的区别

维度 原有 Guardrails InvokeGuardrailChecks
资源管理 需创建 guardrail + version 无需创建任何资源
绑定方式 和模型调用绑定 独立调用,任意位置插入
执行模式 自动 block/allow 仅检测,返回分数
灵活度 一个配置管所有 每次调用可以不同检查组合
适用场景 简单的输入/输出过滤 复杂 Agent 循环的精细化控制
版本管理 需要维护 version 无版本概念

什么时候用新 API

用 InvokeGuardrailChecks 的场景:

  • 多步 Agent(每步风险不同,需要不同检查策略)
  • 快速原型(不想先创建资源就能用)
  • 需要自定义阈值和处理逻辑
  • 检测结果要记日志做分析

继续用原有 Guardrails 的场景:

  • 简单的输入→模型→输出链路
  • 团队不想自己写判断逻辑
  • 需要统一的 block 行为

可用区域

US East (N. Virginia)、US East (Ohio)、US West (Oregon)、Europe (London)、Europe (Stockholm)、Asia Pacific (Tokyo)、Asia Pacific (Sydney)。

上手建议

  1. 先从注入检测开始 —— 这是 Agent 安全的核心防线
  2. 设合理阈值 —— 0.7-0.8 做告警,0.9+ 做 block,根据业务调
  3. 记录所有检测日志 —— 分数数据是后续调优的基础
  4. 别每步都全量检查 —— 输入侧查注入,输出侧查内容和 PII,工具返回查 PII

文档:https://docs.aws.amazon.com/bedrock/latest/userguide/guardrails-use-invoke-guardrail-checks.html
Bedrock Guardrails 概览:https://aws.amazon.com/bedrock/guardrails/

http://www.jsqmd.com/news/1034555/

相关文章:

  • Apple Silicon双系统实战指南:深度解析Asahi Linux部署与安全配置
  • Windows 7系统激活全解析:从授权原理到合规操作指南
  • Windows界面定制深度解析:ExplorerPatcher技术实现与专业级应用指南
  • ExplorerPatcher完全卸载指南:3种核心方案解决Windows系统深度集成难题
  • 深度剖析:IQKeyboardManager的架构设计与实现机制
  • 3步搞定华硕笔记本风扇异常:G-Helper智能散热控制指南
  • AI代理自发卡特尔现象:隐式协调与目标漂移的工程实证
  • 3个实战场景:用yfinance解决金融数据处理中的真实痛点
  • CAST模型:程序化视频检索的技术突破与应用
  • 电脑监控软件哪个好用?精选6款企业级电脑监控软件,最新排行榜
  • Compound Engineering:革命性AI驱动开发工作流引擎
  • 无源电磁场传感器:磁热效应液晶技术解析与应用
  • 不锈钢水箱哪家好?金泽供水实力剖析 - myqiye
  • Windows系统彻底退出微软账户的四种方法:从常规设置到命令行强制解除
  • 2026年英文论文降AIGC指南:从94%压到7%的实操方法与4款工具盘点 - 降AI实验室
  • Spicetify配置文件详解:Spicetify.ini参数设置与优化技巧
  • 小米手表表盘设计终极指南:5分钟掌握Mi-Create免费可视化工具
  • Bedrock Guardrails 新 API 实战:无需创建资源,给 Agent 每一步加安全检查
  • 抖音视频下载神器:10分钟掌握无水印批量下载技巧
  • 3步重塑数字记忆:从微信聊天到个人知识图谱的智能跃迁
  • 抖音视频下载终极指南:10分钟掌握无水印批量下载技巧
  • GitHub520:终极GitHub加速解决方案,5分钟解决访问慢和图裂问题
  • 怒开 3 个 agy CLI 账号!我是怎么在老 Intel Mac 上实现顶级模型 Token 自由的?
  • WordLlama终极指南:3步掌握LLM嵌入处理与模型训练完整流程
  • JMeter-RabbitMQ插件:从协议到实践的全链路性能测试指南
  • DeepSeek-V4长上下文效率革命:CSA+HCA与领域专家蒸馏解析
  • Path of Building PoE2:流放之路2终极BD规划器完全指南
  • 2026年|亲测避坑:英文论文怎么安全降AIGC率?3大工具评测与手动修改技巧 - 降AI实验室
  • 净化板正规厂商哪家性价比高?鹏晨新材值得选 - myqiye
  • 百度网盘解析工具:告别限速,5步获取真实下载链接