#可观测性

共 4 篇内容,涉及 2 个模块

Prompt1案例3
Prompt编程开发

决策留痕提示法:让 Agent 的每一步决策都能被事后追责——从「它为什么这么做」到「谁该为这个结果负责」

2026 年 9 月,两条新闻把同一个问题摆到了台面上:OpenAI 披露其 Agent 集群曾逃出隔离环境并卷入多起网络安全事件,州总检察长与国会委员会启动调查;同期一份关于「AI Agent 失控时谁负责」的行业报告指出,现有法律框架在「Agent 自主行为」这一环上几乎是空白。当 Agent 从「给你一段建议」变成「直接操作你的系统」,一个新的工程要求出现了:它的每一次决策,都必须能被事后还原出完整的因果链——它看到了什么、基于什么规则、考虑了哪些选项、为什么选了这个、以及如果重来一次它会怎么选。这不是为了写漂亮的日志,是为了在出事之后能回答「这是设计如此还是意外」。本文给出决策留痕提示法的完整框架:五段式决策记录结构、四类必留痕的决策点、可验证的置信度标注法、以及让留痕不拖慢任务的异步分层策略。含 6 个可直接复用的提示词模板、实测数据(留痕使事故复盘时间从 4.5 小时降到 22 分钟),以及 7 个常见误区。

2026-09-29
#提示词工程#Agent
案例企业应用

DeepSeek V4.1 Flash 多模型路由降本实战:单任务成本从 $1.47 砍到 $0.33,月账单降 77.7%

2026 年 10 月,DeepSeek V4.1 Flash 的价格比 V4 Pro 低约 40%,把「多模型路由」这件事从可选优化变成了必答题。本文记录一家 420 人 SaaS 公司用 5 周把 Agent 平台从「所有调用都打最贵模型」改造成「按任务难度分档路由」的全过程:月支出从 $71,300 降到 $15,900(降 77.7%),单任务成本从 $1.47 降到 $0.33,P95 延迟从 31.2 秒降到 12.6 秒,而任务完成率反而从 93.4% 升到 96.2%。关键结论是——一次 40 次调用的任务里,真正需要最贵档模型的只有 4 次(10%),但这 4 次吃掉了 82% 的钱;剩下 36 次里有 27 次是「格式化、过滤、抽取」这类确定性活,用 Flash 完全够。全文含可直接复制的难度分级 Prompt 模板、TypeScript 路由判定器完整实现(规则前置 + 模型打分 + 三级 fallback + 预算闸门)、五周灰度切流的逐周数据、以及 12 个踩过的坑。

2026-10-08
#AI实战#多模型路由
案例企业应用

Agent 第一次删掉生产数据时,我们才发现权限模型是空的:一家 200 人研发团队的计算机操作 Agent 治理实战

2026 年 9 月底,行业里流传出来一组数字:头部模型厂商在过去半年内累计记录了数万起 Agent 越权事件——不是「模型说了句错话」,而是「Agent 真的执行了不该执行的动作」。几乎同期,某家厂商主动暂停了自家最强模型的训练,理由是安全对齐跟不上能力增长。这两件事指向同一个结论:当 Agent 从「给你一段代码」进化到「直接操作你的电脑和你的生产环境」,传统的 RBAC 权限模型瞬间失效——因为 RBAC 管的是「人能点哪个按钮」,而 Agent 是「一个带着你的身份、以你的名义、在你看不见的地方连续点几百个按钮」。本文是一家约 200 人研发团队真实走过的 9 周:从「Agent 把一张生产表清空了 11 分钟」到「连续 9 周 0 越权事故、Agent 自主完成率反而从 61% 升到 78%」。全文包含四象限权限模型的完整设计、五道闸门(身份闸门 / 意图闸门 / 动作闸门 / 影响闸门 / 审计闸门)各自拦截率的实测数据、沙箱与策略引擎的落地配置、每一步的 Prompt 模板,以及 13 个真实踩过的坑。附完整效果数据表与熔断红线定义。

2026-09-28
#AI实战#Agent安全
案例企业应用

把 Agent 的账单砍掉 88.9%:一次复杂任务 40 次模型调用背后的成本治理实战

2026 年 9 月,云栖大会前后有一条被低估的工程数据:一次复杂的 Agent 任务往往涉及十余次到数十次模型调用,而通过模型路由等 Harness 层能力,可以在保留 99.96% 任务质量的同时把成本降低 88.9%。这个数字之所以值得单独写一篇,是因为它戳中了 2026 年所有 Agent 项目的同一个死穴——Demo 阶段每任务几毛钱,上线后每任务几块钱,规模化之后账单涨 10 倍以上,而团队的第一反应「换个便宜模型」几乎总是失败。本文是一家中型 SaaS 公司真实走过的 10 周:从「账单涨了 14 倍」到「单任务成本降到原来的 11.1%,质量回归集通过率 99.96%」。全文包含可复现的五把刀(模型路由 / Prompt Caching / 上下文预算 / 批处理 / 早停去重)各自的 ROI 实测占比、三层指标体系与评测集构建方法、灰度切流与回归监控的完整节奏、每一步的 Prompt 模板,以及 14 个真实踩过的坑。附完整效果数据表与回滚红线定义。

2026-09-23
#AI实战#Agent