用 Amazon Bedrock AgentCore 构建 AI 智能体可信度:一套生产级评估框架
AWS 销售与全球服务运营团队基于 Amazon Bedrock AgentCore Evaluations 搭建了生产级多智能体评估框架,用于持续检验 Performance Insights、Customer Insights、Data Insights 等子智能体的回答是否真实可靠。
AWS 销售与全球服务运营团队基于 Amazon Bedrock AgentCore Evaluations 搭建了生产级多智能体评估框架,用于持续检验 Performance Insights、Customer Insights、Data Insights 等子智能体的回答是否真实可靠。
Simon Willison 用 Claude iPhone 默认应用的聊天模式,让 Claude Opus 5.5 Max 构建一个名为「Tree Appreciator」的 Three.js 游戏,玩法是欣赏两棵算法生成树木之间的差异。Claude 耗时 3 小时 7 分钟,返回了一个带音乐、动画和成就系统的找不同小游戏,可玩性相当高。
基于 Amazon Bedrock AgentCore 的多智能体 IDP 系统可自动分类、提取、校验并从业务文档中学习,新文档类型无需手动配置模板,部署通常 20 分钟内完成。
Tamnoon 基于 Amazon Bedrock 构建了智能体云修复编排器 Tami,可自主调查 CNAPP 等来源的安全发现并评估修复安全性,再生成带护栏和回滚指引的修复方案。该方案在 90 天内将关键云暴露减少超过 90%,且未引发任何生产问题。Tami 由调查、安全评分、修复和代码生成四个专用智能体组成,通过单一 API 按任务调用不同基础模型。
基于 Amazon Bedrock AgentCore 构建的 AI 智能体系统可自动生成 PowerPoint 演示文稿,内部测试中完成一份仅需不到 90 秒。
Amazon SageMaker JumpStart 提供预训练模型目录,可通过 SageMaker Python SDK 部署模型、用示例提示词测试延迟与单请求生成速率,并在测试完成后删除端点。
用 Python 3.15 内置的 profiling.sampling 对未修改的 web-edit 应用做采样剖析,发现混合换行符保留是编辑负载的主要瓶颈:preserve_endings 出现在 64.8% 的 15,296 个 CPU 栈中,SequenceMatcher.find_longest_match 占叶子样本的 38.3%。
Amazon Bedrock 的托管授权(managed entitlements)让企业只需在中心账户订阅一次 AWS Marketplace 私有定价优惠(MPPO),即可向组织内多账户分发第三方模型访问权限。
GitHub 为密钥扫描训练了基于 ModernBERT 的上下文感知分类器,替代此前的 LLM 流水线,使推送后扫描中位执行时间降低 86%、服务成本降低超 98%,告警接受率提升 11.5%。该方案采用两阶段流水线:先用正则高召回生成候选,再由微调后的 ModernBERT 结合文件路径、变量名和上下文判断是否为真实凭证,从而过滤占位符、测试样例等硬负例。
针对 MoE 模型在解码阶段因 M 维过小导致 Hopper GPU 利用率低的问题,AWS 通过 Swap-AB 转置将专家维度 N=8192 提升为首操作数,在 H200 上实现端到端输出吞吐提升 2–4%,该优化已合入 vLLM 0.24.0 及更高版本。
AWS 官方博客介绍 SpaceXAI 的 Grok 4.7 已在 Amazon Bedrock 上线,并演示如何用它构建工具调用智能体。作者在三个需要搜索而非查表验证的任务上跑了 72 次智能体运行,共答对 67 次;xhigh 档 18 次全对,low 档答对 15 次但输出 token 约为 xhigh 的八分之一。
推荐理由:通过 72 次智能体实测给出不同推理档位的准确率与 token 消耗对比,可据此为自家任务选择档位。
ShipStation Global 工程团队在 Amazon Bedrock AgentCore 上构建了 Slack 内的 AI IT 服务台智能体 Deckhand,可解答常规 IT 与公司问题、识别报错截图并创建和更新 Jira Service Management 工单,上线后解决了 97.5% 的频道内提问,员工正向反馈率达 96%。
Orca Security 与 AWS 合作在 Amazon Bedrock 上构建了自然语言查询智能体 Discovery AI,可将自然语言问题转换为 Sonar 查询,覆盖 900+ 云模型和 18 种操作符。相比初始基线,查询成本降低 90%、输入 token 减少 93%、延迟降低 75%,目前每天处理数千次查询,响应时间 15 秒。
Python 3.15 正式发布,PEP 810 显式惰性导入(lazy import)可消除重依赖插件带来的启动开销,标准库新增采样分析器 Tachyon(profiling.sampling)。
Amazon Bedrock 面向泰国、马来西亚、新加坡、印尼和台湾五个 AWS 区域开放 OpenAI GPT-6 模型的全球跨区域推理,GPT-6 Sol 与 GPT-6 Luna 可从全部五个源区域调用,GPT-6 Astra 仅从亚太(新加坡)调用。
GitHub Copilot 可通过四种方式定制对代码库的理解:仓库级自定义指令写入 .github/copilot-instructions.md,路径级指令放在 .github/instructions 并用 applyTo 字段匹配文件。
AWS 发布面向多节点部署的 Ray LLM Deep Learning Container,可在 Amazon EKS 上用两个 GPU 节点部署单个大语言模型,将 prefill 与 decode 阶段分离并置于同一个 OpenAI 兼容端点之后。
AWS 发布 llama.cpp 专用深度学习容器(DLC),可在 Amazon SageMaker AI 上以 CPU 或 GPU 托管量化模型,并通过 InvokeEndpoint 提供 OpenAI 兼容的 chat completions。
The Verge 编辑在 M5 Ultra Mac Studio 上安装开源 Hermes Agent,并选用 1250 亿参数的 Qwen 3.8 Flash Next(约 105GB),尝试本地运行 LLM 与智能体。
Standard Bots 用共享基础模型加客户演示微调的方式驱动机器人,最大模型仅数十亿参数,靠超 10 亿张图像训练实现零样本感知,模型在云端训练、本地推理。其机械臂面向上下料、焊接和装配,由模型负责零件识别、传统编程负责运动控制,边缘 GPU 生成动作块并流式传给底层控制,以应对工厂网络不稳、停机不可接受的现实。
Postman 披露其 Agent Mode 在 Amazon Bedrock 上的生产架构:通过向量数据库将 170 多个工具按任务动态收窄至约 15 个,并交给上下文隔离的子智能体,因为测试显示可见工具超过约 40 个后工具选择错误率上升。
Simon Willison 用 ChatGPT 桌面版 Codex 标签页的语音对话模式,在做饭的半小时里几乎全程靠说话为博客开发出 Newsletters 页面,所用模型为 GPT-6 Astra High。
LegalOn 将每日 Codex 预估成本削减 65%,同时保持开发速度。其做法是按任务匹配 Astra、Sol 和 Luna,并对预算进行策略性管理。
AWS 发布基于 Amazon SageMaker HyperPod 与 EKS 的多租户参考架构,让多个团队共享同一 GPU 集群并保持隔离与资源公平。
Amazon Quick 与 Amazon Bedrock Knowledge Bases 在预检索 ACL 过滤之外新增实时 ACL 校验,在查询时直接向权威数据源核实权限,避免依赖可能过期或映射错误的 ACL 数据。该方案分两阶段:先用索引中已存的 ACL 做语义检索筛选候选文档,再通过 Google Drive API 等实时验证,未授权文档不会进入 LLM 上下文。
Cornerstone OnDemand 基于 Amazon Bedrock 和开源智能体编排框架 Strands Agents 构建多智能体系统 Orion AI,将数据库诊断时间从 45 分钟降至 10 分钟,减少 78%。该系统还把手动生命周期步骤从 10 步以上压缩为 1 次交互(减少 70%),并将冗余告警中位数削减 65%,由三人团队在六个月内交付。
AWS 分享了一套六周结构化培养方案,让非工程背景的业务人员用 Amazon Bedrock AgentCore、Strands Agents SDK 和 Amazon Nova 模型构建可运行的 AI 原型。
针对 AWS DevOps Agent 只诊断不改动生产资源的问题,该方案用 Amazon EventBridge、AWS Lambda Durable Functions 和 Amazon Bedrock 搭建自动修复工作流,把调查摘要转为预验证的修复动作。
Qlik 基于 Amazon Bedrock 打造 Qlik Answers,为全球超 4 万名客户提供带来源引用的自然语言问答,其 Discovery Agent 上线以来已为客户发现超 10 万条异常与离群点。
AWS 提出 Agentic Value Model,用于替代以“节省工时×人力成本”为核心的 RPA 时代 ROI 模型,衡量 agentic automation 的四类价值:时间节省、异常处理、决策质量,以及变更韧性与维护经济性。
AWS 官方博客介绍如何在 Amazon Bedrock AgentCore runtime 上运行开源智能体系统 OpenClaw,构建带长期记忆的园艺助手 Sprout。
Parseable 是一款兼容 OpenTelemetry 的全新可观测性工具,提供开源 AGPL 的 Rust 实现(单个约 180MB 二进制文件)、企业版和云托管选项。Datasette 1.0a41 新增 OpenTelemetry 支持后,作者用 Codex 跑通 Parseable 并接入 Datasette 的 traces,展示了可用的配置模式。
基于 Amazon Bedrock AgentCore、Amazon Nova 2.5 Sonic 和 Amazon Bedrock Knowledge Bases,可在航空公司应用中搭建语音旅行礼宾服务,让旅客通过语音查询行程、改座位、更新餐食偏好并转接人工客服。
针对多团队共享 Amazon SageMaker HyperPod 集群的治理难题,AWS 提出组织、项目、集群、工作负载四层控制模型,并说明如何通过 SageMaker Unified Studio 将已批准的 HyperPod 集群接入项目,同时保留底层 IAM、Amazon EKS 与 Slurm 控制。
AWS 发文解读国际标准 ISO/IEC 42005:2025,说明客户如何将 AI 系统影响评估整合进企业风险管理体系。该标准覆盖评估全生命周期,Annex D 用于简化并避免与现有评估重复,Annex E 提供独立实施模板,并给出轻量级 triage 判断是否需完整评估。
Simon Willison 让 Claude Opus 5.5 设计文本音乐格式并构建可播放的 artifact,要求达到《猴岛小英雄》初代配乐水准,结果意外更贴近猴岛主题且质量出乎意料地好。他猜测文本模型作曲能力可能类似此前的 3D 图形能力,是近几个月才涌现的新能力,但需用其他新旧模型做实验才能确认。
Anthropic 的 Claude Opus 5.5、Claude Sonnet 5.5 和 Claude Sonnet 5 已上线 AWS GovCloud (US) 区域的 Amazon Bedrock,为 ITAR 等受监管工作负载提供 AI 辅助开发通道。
Amazon Bedrock AgentCore Evaluations 支持内置与自定义评估器,可衡量多智能体系统的准确性、任务成功率与行为表现。
Amazon Quick 控制台不支持将用户从 Admin 直接降为 Reader,或从 Author 直接降为 Reader,update-user API 也会以“You cannot downgrade a user role”报错拒绝。
Amazon Bedrock Managed Knowledge Base 上线智能体检索,通过 AgenticRetrieveStream API 把多部分问题拆成子查询、判断证据是否充分并决定是否再次检索,而 Retrieve API 只做一次混合搜索。