把偷偷用上的 AI 工具揪出来

github.com/uber/ADR Uber 把内部盯 AI agent 的那套安全系统放了出来,名字叫 ADR,开在 GitHub。它治的病很具体,公司里没人报备、就偷偷用起来的那些 AI 工具。 五步照录。第一步扫出没被批准的工具。第二步盯着 agent 动了哪些接口、干了哪些活。第三步评一评现有的防御挡不挡得住。第四步找威胁。第五步在动作落地前拦下来。观测这层已经在生产里跨三套操作系统运行,采到七种以上 AI 编程工具的轨迹。检测是先粗筛再深挖,可疑的会话再推一层。基准那块有三百多个任务、一百三十四个 MCP 服务器,十七种攻击路数都过了一遍。 成绩单也摆着。GitHub 上一千六百多颗星、一百七十来个叉,相关论文被 MLSys 2026 接收,系统本身正在 Uber 的生产环境里跑。开源范围说得很清楚,放出的是发现、传感、基准和检测那几块,负责拦截的那块与离线那颗引擎没在其中。 "安全团队看不见的那层被拆开摆平"这半句是全场重心。前面骨架就是环境那篇讲的是训练那侧怎么防作弊,这条讲的是生产那侧怎么防裸奔。跟前面它不会自验呼应,那条说模型得有人验,这条说连"谁在用工具"都得有人数,两头都在补眼睛。跟前面把你自己从瓶颈上移开也接得上,自动化把人挪出流程,眼睛那活就交给了系统。 谁在用、装了什么、哪一步被人绕过去,这三问原先全靠自觉,我留意的是这条把自觉换成了记录。 我留的疑问有三处。七种工具之外怎么扩没说;两层检测的误报率没给数;没放出的那两块何时开也没交代。 这周先在自己团队里跑一遍发现那块,看报备名单之外还站着几个。
话题来源 @Ryrenz 41.1K阅读 ❤️606 x.com/…↗ 已改写,非原文转载 GitHub - uber/ADR: ADR secures enterprise AI agents through observability, security benchmarking, and threat detection. ADR secures enterprise AI agents through observability, security benchmarking, and threat detection. Deployed at Uber. - uber/ADR GitHub
105 浏览 0 评论 0 反应
登录 后参与评论
还没有评论,来抢沙发。
查看完整榜单
查看完整榜单
查看完整榜单