OC
OpenShell 用形式化方法审权限,证明的边界仍取决于模型
科技 · 2026-09-16 · AI安全 · 阅读 1

OpenShell 用形式化方法审权限,证明的边界仍取决于模型

在 OpenShell 团队的研究文章中,研究者尝试把 Agent 提出的权限变化编码为逻辑约束,再用 Z3 判断它是否超出预先批准的安全基线。文章同时讲述了一次演示中,凭据与另一种网络访问方式组合后绕过既有检查的教训。

作者:韩启明|OC 政策与安全编辑

OpenShell 团队的研究文章中,研究者尝试把 Agent 提出的权限变化编码为逻辑约束,再用 Z3 判断它是否超出预先批准的安全基线。文章同时讲述了一次演示中,凭据与另一种网络访问方式组合后绕过既有检查的教训。

一句话结论:形式化方法可以严格回答已经建模的问题,但不能替人保证模型没有遗漏现实中的能力。

单项都合理,组合起来却可能越界

允许读取代码、允许访问某个主机、给一个工具使用凭据,单独看都可能符合工作需要。问题是,不同能力组合之后,是否出现了审批者没有想到的新路径。

这比“这个命令看起来危险吗”更复杂。安全边界有时不在工具名称,而在它能够使用的协议、方法、目标资源和凭据范围。

随着 Agent 运行时间变长,权限调整变多,逐条人工回忆这些关系会越来越困难。形式化验证试图把一部分重复检查变成明确、可复算的逻辑问题。

它实际上在寻找反例

一种核心查询是:有没有某个动作,新策略允许,而安全基线不允许?如果找到了,这个动作就是超范围的具体证据。

如果没有找到,并且求解器完成了证明,则表示在当前形式模型里不存在这样的反例。这个结论比模型回复一句“看起来安全”更具体,也更便于审计。

候选权限超出基线并出现反例的概念示意

但“在当前模型里”几个字不能省略。它既是形式化方法的精确之处,也是不能夸大的边界。

没写进模型的能力,不会被凭空发现

如果建模者误以为某个二进制只能读取,而它实际上还能写入,求解器不会自动获得这份操作系统知识。它会忠实推导输入的规则,而不是替人检查所有实现细节。

同样,策略定义与运行时执行必须一致。逻辑上禁止了一条路径,如果代理层没有真正拦截对应流量,证明和实际系统之间就出现了缺口。

所以需要维护的不只有策略文件,还包括策略语义、能力描述和执行机制。一次成功证明不是以后所有版本的永久认证。

不确定结果应有明确去处

文章区分了可满足、不可满足和未知等求解结果。对权限控制而言,未知不能被悄悄当成“没有发现问题,所以通过”。

某些不支持的策略表达或求解困难,需要进入进一步审查。否则,系统越复杂,越容易在最需要谨慎的地方退回默认放行。

这也是自动审批产品应当向用户展示的状态:被证明在界内、发现超界证据、尚不能确定,三者对应不同的下一步。

人工判断并没有失去位置

逻辑检查不理解业务背景。一项删除权限针对临时测试库还是生产库,资源命名是否可信,任务是否真的需要新增能力,都仍涉及上下文判断。

合理分工是让形式化检查提供边界与反例,让人或受信任的审查系统判断任务意图和业务必要性,再由运行时执行最终约束。

这样的组合不是“数学取代安全团队”,而是把人容易疲劳的重复推理交给确定性工具。价值在于减少含糊批准,而不是制造一张宣称绝对安全的证书。

关键事实

材料属于 OpenShell 研究与工程说明;Z3 检查候选策略与批准基线的包含关系;证明依赖建模范围和运行时语义;未知结果不应当作批准。

OC 判断

形式化验证最有用的输出是具体边界和反例,不是没有适用条件的安全口号。

为什么重要

长期 Agent 的权限会持续演变。能够解释一次扩大究竟新增了什么,比让审查者反复阅读长名单更容易形成可靠治理。

参考来源

相关阅读

基于标题、摘要和正文内容自动匹配。

更多科技

评论

围绕这篇文章补充信息、提出问题或分享观察。

0
暂无评论。

发表评论

继续看看 OC 用户围绕这个话题说了什么、做了什么。

相关碎碎念

更多

最近越来越多思考,我们跟agent的关系,比如我最近用blender mcp很多,基本上我算是会用blender的,但是老记不住很多热键,以前我可以做很复杂的模型,但是要是不是的去查blender的操作热键。现在我完全不参与模型的建模,只让codex帮我生成。 但是我还是在查blender的热键,我现在需要的是numpad .这样聚焦到一个对象的方法,我需要的是numpad /这样的方法来把除了选中的对象,其他都隐藏的热键。 换言之,我现在需要高效的人工视觉复检blender mcp的成果,这是我对自己目前blender能力的需求了。

tinyfool 2 0

在我的windows游戏本,也安装了codex,现在叫chatgpt app。然后用遥控的方式操作这个codex去做很多事情,比如以前windows游戏本没空间了,我需要打开steam、gog、战网,然后手工看一堆目录的占用。现在直接用codex做个扫描。然后决定要不要暂时删除某个游戏啥的。 以前要在windows游戏本实验一些必须N卡的AI项目要自己去安装,现在也都交给Codex来做,我就在我习惯的mac环境下遥控即可

tinyfool 0 0

帕格尼物语的任务全部打穿,然后开始玩社区创作的地图,这种游戏在建设的时候特别过瘾,建立起稳定的经济模型后也很过瘾,稳定下来观察小人的行为也很过瘾,然后如果没有外部矛盾,比如敌人侵略或者必须找到某种材料,等等的问题,就开始索然无味了。 人生其实也像这样的游戏,我曾经构建过几次自己的稳定架构,然后就索然无味,然后又因为抑郁,崩塌了,我在人生这个游戏最近感觉有有点动力不足,就是因为每次架构彻底崩塌才来重建,十分疲惫

tinyfool 0 1

相关帖子

更多

做 AI 语音产品时,授权、撤回和审计日志应该怎么落地?

<p>最近看到越来越多关于声音授权的讨论。对开发者来说,真正麻烦的往往不是“模型能不能模仿”,而是授权如何进入系统、生成结果如何追溯,以及授权撤回后该怎么办。</p> <p>我们在做 FlowSpeech 时也碰到过类似问题。我的体会是,不要把“用户勾选过同意”当成一个布尔字段,而应该把它做成一组可以审计的业务对象。</p> <h2>1. 把声音资产和授权分开</h2> <p>声音文件只描述技术属性,例如哈希、上传者、存储位置和创建时间。授权记录则至少要包含授权主体、用途范围、地域、有效期、来源证据和当前状态。这样同一份声音用于个人试听、商业广告、公开播客时,可以绑定不同的授权,而不是共用一个模糊的 consent=true。</p> <h2>2. 每次生成都保存授权快照</h2> <p>生成任务不要只引用当前授权 ID。授权内容以后可能变更,如果任务只查最新状态,历史结果就无法解释。更稳妥的做法是在任务创建时保存授权版本、文本哈希、声音版本、模型版本和操作者。生成出的音频再记录 artifact_id,并反向关联任务。</p> <p>我会把最小链路设计成:</p> <ol> <li>voice_asset:原始声音及版本;</li> <li>consent_grant:授权范围与证据;</li> <li>generation_job:请求参数和授权快照;</li> <li>audio_artifact:输出文件、校验值和公开状态;</li> <li>audit_event:谁在什么时候创建、下载、公开或撤回了内容。</li> </ol> <h2>3. 撤回不是简单删除一行</h2> <p>授权撤回后,系统至少要阻止新任务,并把相关公开音频进入下架队列。已经交付给客户的文件是否能删除,要按照合同和产品能力区分,不能在界面上承诺技术上做不到的“全球删除”。更现实的状态机是 active、suspended、revoked、expired,并明确每个状态允许哪些动作。</p> <h2>4. 对外展示也要可验证</h2> <p>除了后台日志,公开音频最好带上来源标记或可查询的生成记录。水印不是万能方案,但“可识别的音频 + 可验证的元数据 + 清晰的举报入口”组合起来,比一句“AI 生成”更有用。</p> <p>我们现在做的 <a href="https://flowspeech.io/zh">FlowSpeech</a> 主要解决上下文感知、情绪和停顿控制。越往产品化走,越觉得声音效果只是前半程,权限边界和可追溯性才决定这类工具能不能长期使用。</p> <p>大家在实际项目里会把授权证据放在业务数据库、对象存储,还是单独的审计系统?如果授权撤回,你们通常怎么处理已经生成并交付的音频?</p>

FlowSpeech 0 1

你们的Codex额度提前耗完了没?戒断反应如何?

<p>我在第三天就消耗了只剩1%,忍了一天,然后今天干脆用这最后的1%,开着5.6 Sol 极高 强推我一个提示词笔记本应用的功能落地。最终用时3小时,居然还是跑完了。但是现在还是出现一些戒断反应,感觉啥也做不了,就无精打采的,困。</p> <p>我做了一个Prompt Notebook,专门用来收藏或者记录自己手搓的生图提示词。带Chrome一键收藏插件。支持AI优化提示词。支持提示词中提取常用字段作为提示词百科词汇。也自带生图功能用来测提示词。但是要搭配Cloudflare R2+Worker的图床。</p> <p>今天主要是做一个AI模特的资产库。将常用的AI模特固定下来,进行身份设定,以及模特的一些角色定妆图。之后生图可以直接调用AI模特自动作为垫图。</p> <p>这是AI模特资产库的界面: <img src="/upload/thread/202608/42b5f73e-938f-45de-b74e-da69da9d72a8.webp" alt="1bb0d28b-c7dd-4327-bafa-26b60323cbed" /> 这是主界面的提示词瀑布流,支持关键词或标签搜索: <img src="/upload/thread/202608/3e15b6e7-345f-48b4-aeff-1bbd89afe9d3.webp" alt="ab998e2f-9ccc-4173-832f-223aa6c6fa81" /> 这是提示词笔记的预览界面,可以复制提示词,分享提示词,点击分享还有分享短链:(https://prompt.jintao.co.uk/share/20260806LfsmY) <img src="/upload/thread/202608/bab31972-0468-4582-b873-6309233254a6.webp" alt="20260806-201213" /> 可惜现在没额度了,我又不想换模型折腾。现在还有些界面细节和小功能需要落地完善,可能还要虫子要抓。弄好了,打算放GitHub开源。</p> <p>有朋友想试试的么?</p>

shynloc 2 4

一个体会,Codex 这种现代 Agent,每天一个变,几天不用就有新惊喜

<p>当然我说的也包括 Claude Code,新功能日新月异,还有就是 AI 能力提升以后,可以做的东西日新月异。还有各种工作流方法日新月异。</p> <p>更好玩的是,我最近经历过很多次,你跟人介绍现在 Codex 可以做到什么样子,他们都觉得很厉害。但是你现场一演示,他们的震撼就更加完全不同了。所以,这种东西,需要大量的 Workshop 去沟通交流,光看文字很难讲清楚,直播、视频也越来越重要了。</p>

tinyfool 1 89