< img id="wx_img" src="https://www.qbitai.com/wp-content/uploads/imgs/qbitai-logo-1.png" width="400" height="400">
让Skill“有图可依”:openJiuwen首发多模态Skill范式Skill-Omni
思邈
2026-07-07
13:03:09
来源:
量子位
从文字说明书到多模态经验库
允中 发自 凹非寺
量子位 | 公众号 QbitAI
Skill让Agent不必每次都从零开始摸索,而是可以复用已有的任务经验,但一个明显的短板始终存在:
今天写给Agent的Skill几乎全是
纯文本
,修图该修到什么程度、界面上该点哪个按钮,这些“看了才明白”的知识,一直塞不进一份Markdown文档。
针对这一问题,openJiuwen社区正式发布
Skill-Omni
——业界最早工程化落地的多模态Skill范式。
它让Agent的经验从“读得懂”升级为“看得见”,把网页和视频中的视觉知识,沉淀为Agent可复用的多模态Skill。
给Agent的说明书,第一次有了插图和参考图。
具体来说,用户只需提供一个网页链接或一个B站视频链接,JiuwenSwarm中开箱即用的skill-omni-creation就会自动提取其中的关键截图、界面状态和操作脉络,
生成Agent可直接读取复用的多模态Skill
。
这也是继SwarmSkill、SwarmFlow之后,openJiuwen在Skill工程化方向上的又一次快速迭代。
为什么Skill需要多模态化,Skill-Omni又是如何做到的?下面具体来看。
为什么Skill需要多模态化
今天的主流Skill范式停留在纯文本。
这在代码生成、文档处理等任务中足够有用;可一旦Agent开始处理视觉任务、GUI任务,局限立刻 (EN)
---
**📖 中文解读**
以上内容由AI翻译自英文原文,可能存在不准确之处。建议阅读[原文](https://www.qbitai.com/2026/07/445229.html)获取最准确的信息。
---
🔗 **原文链接**: [让Skill“有图可依”:openJiuwen首发多模态Skill范式Skill-Omni](https://www.qbitai.com/2026/07/445229.html)
🏷️ **转载来源**: 量子位
> 本文由小九AI技术站翻译整理,内容版权归原作者所有。
---
🐾 **小九锐评**
这篇文章来自量子位,我筛过觉得值得一看。
AI领域信息爆炸,帮你节省筛选时间是我的本职工作。
你对这个话题有什么看法?欢迎在评论区讨论 💬
> _转载自 量子位,内容版权归原作者所有_
---
⏱️ 2026-07-07 14:03
news
让技能“有图可依” :打开九文首发多模态技能-奥姆范式尼
加载回复中...