openJiuwen上线视频记忆 时延最高降97%
时间:2026年11月4日,国内媒体报道 openJiuwen 社区的长期记忆模块 AgentMemory 已正式上线多模态记忆能力 OmniMem-Lens(多模态记忆透镜),社区同时宣布 WorkSwarm 即将支持对接该能力。
地点:openJiuwen 开源智能体社区,官网 openjiuwen.com;AgentMemory 项目代码托管于 GitCode/AtomGit 与 GitHub 的 openJiuwen-ai/agent-memory 仓库,采用 Apache-2.0 协议开源,项目页面显示星标数已超过 7000。
人物:openJiuwen 社区 AgentMemory 团队。
事件详情:OmniMem-Lens 解决的是智能体看长视频时的一个老问题:目前业界的通行做法是把长视频按固定时间窗(比如一分钟)切成一格格小段分开记忆,结果是证据被切碎、记忆被稀释。团队的做法是给智能体同时装上眼睛和耳朵:视觉流判断画面是否切换并标记,ASR语音流在画面没动但说话人换了话题时把它听出来,两路证据交叉对焦,在真实的事件边界上落刀。记忆按三层结构保存,L1是目录、L2是索引、L0是原文,用户要大纲给大纲、要细节给细节,互不干扰;其中L1与L2完全文本化并向量化,可以直接接入主流向量数据库,对已有RAG或智能体技术栈几乎零改造。为了不让问答时再把几个小时的视频重看一遍,繁重的记忆整理被提前在离线完成,提问时先与L1、L2做语义匹配,只有需要核对视觉细节时才按需调取L0的精确视频帧。官方公布的实测数据是:配合Qwen3-VL-8B处理视频记忆问答,对比直接用Qwen3-VL-8B回答视频内容,召回精度在通用长视频基准Video-MME-L上提升8%、在长视频理解基准LVbench上提升6.4%、在记录一整天日常生活的第一人称基准EgoLife-QA上提升45.7%;在线问答时延上,LVbench上原本要等34.5秒,加上OmniMem-Lens后只需1.72秒,快了20倍,整体在线问答时延最高降低97%。
背景:长视频是当下多模态智能体最难啃的场景之一,比如看完3小时新品发布会并找出所有产品亮点、分析一整天监控视频并标记异常事件,信息量会瞬间冲破上下文。团队给出的两个反例很典型:在一段2小时动画片里,固定1分钟盲切把“女生离开、男生目送、男生幻想她变成蝴蝶”这个从第14分20秒持续到第16分50秒的完整事件切成三段,检索时只拿到“男生目送”和“蝴蝶飞走”,因果关系彻底丢失,智能体把幻想当成了真实发生的事;在另一场2小时的产品评审会上,屏幕始终是同一张架构图、40分钟没有变化,但讲者先后讲了架构设计、性能压测、下季度排期三个议题,只看画面的方案会把它打包成一段,关键数字被埋在噪音里召不回来。openJiuwen 是华为系的开源智能体平台,AgentMemory 是其长期记忆模块,为运行在框架上的智能体提供记忆提取、存储、检索与迁移能力,社区此前已开源过 AutoGenetic Memory 等记忆相关能力。
影响:对做智能体的团队,这套思路的价值在于把长视频记忆从“在线硬扛”改成“离线建索引、在线秒答”,把每次提问都重看一遍视频的高成本摊到了离线阶段;L1、L2文本化并向量化的设计,也让它可以直接挂进现有的RAG链路,不需要重建技术栈。对行业评估标准,它提示了一个此前被低估的环节:智能体在长视频上的失败,很多时候不是模型理解力不够,而是记忆在切分源头就没有对准事件边界,先按秒切再谈召回精度本末倒置。不过也要看到边界:目前公布的数字都是团队自测口径,自选三个评测集、以Qwen3-VL-8B作为底座模型,还缺少第三方复现;EgoLife-QA提升最大恰恰说明方法在事件密集、细节琐碎的场景收益最大,而对更长、更混乱的真实视频素材是否同样有效,还需要更多验证。
总结:OmniMem-Lens 把长视频记忆的关键动作从按秒盲切改成按事件切分,再用三层记忆结构和离线索引把召回精度与在线时延同时拉起来,召回精度最高提升45.7%、在线问答时延最高降低97%。对正在做多模态智能体的开发者,这是一条可以直接参考的工程路径;但把它当成通用结论还早,毕竟成绩出自项目方自己的评测。
常见问题:
问:openJiuwen 是什么?
答:华为支持的开源智能体平台;AgentMemory 是其长期记忆模块,Python 开发,Apache-2.0 协议开源。
问:OmniMem-Lens 与固定时间切视频有何不同?
答:固定切分会把连贯事件切成碎片;OmniMem-Lens 用视觉流判断画面切换、语音流判断话题转折,在真实事件边界落刀,按三层结构存记忆。
参考来源:
量子位:让Agent首次拥有视听双流记忆,openJiuwen Agent-Memory看懂长视频
https://www.qbitai.com/2026/11/507533.html
GitCode/AtomGit:openJiuwen agent-memory 项目主页
https://gitcode.com/openJiuwen/agent-memory/
GitHub:openJiuwen-ai/agent-memory 仓库
https://github.com/openJiuwen-ai/agent-memory
Techub News:openJiuwen AgentMemory 上线多模态记忆能力 OmniMem-Lens
https://www.techub.news/flash/90efc6eb-aeaf-4868-8e0f-bdc9a6df3830
AI SynthePulse:openJiuwen AgentMemory launches OmniMem-Lens for event-based long-video memory
https://ai.synthepulse.app/en-US/stories/18307
openJiuwen 官网:开源智能体平台
https://openjiuwen.com
华为开源项目列表:openJiuwen 项目页
https://www.huawei.com/cn/open-source/projects
昇腾社区:openJiuwen 上手指南
https://www.hiascend.com/developer/techArticles/20260325-1
机器之心:openJiuwen社区开源 AutoGenetic Memory,让Agent记忆自主生长
https://www.jiqizhixin.com/articles/2026-07-02-3







