产品Qwen-MM-Plugins:让智能体原生支持多模态
筛选线索多模态Agent 智能体模型家族发布动态1 个独立信源
QwenLM 团队发布了 Qwen-MM-Plugins,这是一套插件,旨在让智能体原生支持多模态能力。它能够处理图片、视频和文档,支持视频编辑以及 3D/CAD 数据处理,从而将多模态模型升级为多模态智能体。该项目的演示效果可在其 GitHub 仓库中查看。
AIHOT · X / 公众号精选
57TOPIC · CURATED VIEW
关注模型跨文本、图像、音频和视频理解与交互的能力进展。
QwenLM 团队发布了 Qwen-MM-Plugins,这是一套插件,旨在让智能体原生支持多模态能力。它能够处理图片、视频和文档,支持视频编辑以及 3D/CAD 数据处理,从而将多模态模型升级为多模态智能体。该项目的演示效果可在其 GitHub 仓库中查看。
Meta AI 超级智能实验室发布了首个开放权重模型 Muse Glimmer,并已上线 OpenRouter。这是一款 30B 参数的密集文本+图像模型,采用 Apache 2.0 许可证,定位为可靠的本地智能体,MCP Atlas 得分 75.5,SWE-Bench Pro 得分 51.2。
Inkling 是一个开放权重(open weights)的多模态模型,参数量达 975B,专为微调(fine-tuning)场景设计。该产品允许开发者直接获取预训练权重,并在此基础上针对特定任务进行后训练或定制化调整。目前未公布发布方及具体部署方式,但开放权重特性暗示用户可自行托管和修改模型。
小红书技术团队开源 BigMac,一种针对多模态大模型训练的依赖安全嵌套流水线新范式。它利用 LLM 流水线作为主干,在不打乱执行顺序的前提下嵌入编码器和生成器计算,相比基线实现 1.08x-1.9x 加速,同时保持激活显存有界。BigMac 已作为 dots 多模态模型训练的核心组件投入生产。