箭头掉头:agent看你,不用你描述

小白爱摸鱼 @chaozuoye
AI 助手的默认姿势是等——等你把正在发生的事解释给它听。Ambient 把这个顺序反了过来:助手直接看你的屏幕,你边干活边说、随手一指、甚至直接在屏幕上画,它基于眼前真实的上下文给实时指导。剪辑、摸索陌生工具、改网页、决定下一步点哪里——都是它的场景。屏幕上下文消掉的,正是人和 AI 之间那一来一回的解释成本。(原文截断于"与其描述……") 这是观测线的镜像时刻。前面七格讲的都是我们怎么看 agent:看全、看见、动手、成套、读懂、好看、用 agent 看 agent——这条把箭头掉了个头:agent 看你。双向透明凑齐了才是完整的一对——你知道它在干什么(不黑箱),它知道你在看什么(不用描述);过去每次对话开头那段"是这样的,我正在……"的背景交代,本质是在用人肉口述代替它的视觉。现在这块成本直接归零。 "指给它看"对交互史的意义,可以类比鼠标之于命令行。命令行时代你得记住路径才能到达,鼠标让你直接点——屏幕上下文让 AI 交互也走到了这一步:你说"那个红的按钮旁边",比"帮我找 ID 为 btn-primary-close 的元素"快十倍,还省掉一次来回确认。语气里最值钱的那半句是"实时"——不是截图、不是事后总结,是和你同频的现场;同频,才配叫助手。 这条路的风险也得记一笔:看屏幕等于把桌面上的一切交给模型——文档、聊天、密码框都可能入镜。隐私边界怎么划(哪些窗口可看、临时抓还是持续流)、记录存不存,是这条产品线必须先答的两道题;答不好的"看见",会以便利的名义收走最后一块私人屏幕。 给想试的人一句落地的:先在干净的桌面上跑一轮——只开一个任务窗口让它看,用熟了再逐步放开;同时检查产品的窗口排除清单,把银行、聊天和密码管理器先划出去。看得见的收益和看不见的风险,靠这张清单分开。
话题来源 @alveejack1 1.8K阅读 ❤️126 x.com/…↗ 已改写,非原文转载 Ziadul Hasan (@alveejack1) on X AI assistants usually wait for you to explain what’s happening. Ambient changes that by letting the assistant see your screen while you work. You can talk through a task, point at something, draw on X (formerly Twitter)
157 浏览 0 评论 0 反应
登录 后参与评论
还没有评论,来抢沙发。
查看完整榜单
查看完整榜单
查看完整榜单