保姆级教程:将N8N升级为“全模态”神器,看图、听音样样行!

[复制链接]
发表于 2025-12-8 13:58:54 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能,让你轻松玩转社区。

您需要 登录 才可以下载或查看,没有账号?立即注册

×
本日咱们来聊个超酷的功能:怎样让你的 n8n 工作流“长眼睛”和“长耳朵”? 🧐
很多朋侪在用 n8n 搭建 AI 应用时,发现岂论怎么折腾,好像只能发笔墨。想发张图片让 AI 分析?大概发段语音让 AI 听听?对不起,不支持。🚫
别急!本日这篇教程利市把手教你,怎样利用 全模态(Multimodal) 大模子,让你的 n8n 支持文本、图片、音频、视频的上传与多轮对话!
举个栗子 🌰:

我给 AI 发一张海报图,问它:“图里写了啥?”
它立马告诉我:“N8N 2.0 发布了”
是不是很赞?只要把握了这个方法,音视频分析也齐备不在话下!
废话不多说,咱们直接上干货!👇
视频演示

https://www.bilibili.com/video/BV1ynmwBYESL/
1️⃣ 买通“任督二脉”——开启文件上传 📂

起首,我们必要一个入口。
在 n8n 中添加 Chat Trigger(谈天触发器)节点。
⚠️ 留意: 默认环境下,这个谈天窗口只有“发送”按钮,是不支持上传附件的。

怎么破?
在 Chat Trigger 的设置里,找到 Allow File Uploads(答应上传文件)选项,把它打开!✅
设置好后,你会发现你的谈天窗口多了一个回形针图标 📎(大概上传按钮)。这就意味着,你的通道已经买通了,可以继承图片、音频和视频啦!

2️⃣ 选择“最强大脑”——设置 AI Agent 🧠

纵然通道通了,如果你的大模子是个“脸盲”大概“听不懂”,那也没用。以是,我们必要一个支持全模态的大模子。
在 n8n 流程中:

  • 下一步添加节点: 这里肯定要选 AI Agent!

    • 敲黑板:万万别选 Basic LLM Chain,谁人通常只支持纯文本,不支持多模态操纵。🙅‍♂️

  • 设置 Model: 在 AI Agent 里,我们必要设置一个 Chat Model(谈天模子)。
3️⃣ 焦点秘技——接入 Qwen-Omni (通义千问) 🔗

我们要选哪个模子呢?这就得用到阿里的百炼平台了。

  • ❌ DeepSeek:固然很火,但现在 API 紧张侧重文本和推理,全模态支持不是它的刚强。
  • ✅ Qwen-Omni:这是阿里最新的全模态大模子,能看图、听音、看视频,选它准没错!
关键操纵来了(必看): 🛠️
由于 n8n 原生大概没有直接的“百炼”节点,大概为了通用性,我们这里利用 OpenAI Chat Model 节点来“伪装”接入。由于百炼平台美满兼容 OpenAI 的协议!
操纵步调:

  • 添加凭据 (Credentials):

    • 去阿里云百炼平台,注册并登录。
    • 在“API-KEY管理”里创建一个新的 Key,复制下来。
    • 在 n8n 的 OpenAI 凭据里,把这个 Key 填进去。

  • 修改 Base URL:

    • 在百炼的模子广场找到 Qwen-Omni,点击“API参考”。
    • 复制谁人 Base URL 地点。
    • 粘贴到 n8n 凭据设置里的 Base URL 栏目中。

  • 毗连测试: 点击 Save/Test,看到绿色小对勾 ✅ 就阐明毗连乐成!
4️⃣ 实战演练——见证古迹的时候 ✨

毗连乐成后,回到 n8n 的 OpenAI Model 节点:

  • 在模子列表(大概手动输入)里选择 qwen-omni-turbo (大概日期后缀的最新版,如 12 月份的版本)。
  • 关闭杂项: 那些联网搜刮、文件搜刮的高级功能这次用不上,齐备关掉,我们只测多模态。
测试开始! 🚀

  • 打开谈天窗口。
  • 上传一张包罗笔墨的图片(好比 n8n 2.0 的海报)。
  • 输入指令:“提取图片中的笔墨”。
  • 点击发送!
效果展示:

大模子灵敏辨认并复兴:“这张图片表现的是 n8n 2.0 发布了。”
我查对了一下原图,完全符合! 💯
📝 总结

想要实现 n8n 全模态,必须满意两个条件,缺一不可:

  • 入口支持:Chat Trigger 开启文件上传。
  • 模子支持:后端必须毗连支持全模态的模子(如 Qwen-Omni)。
搞定这两步,你的 n8n 就不再是只会打字的呆板人,而是能看能听的超等助手了!视频和音频的原理是一样的,各人课后可以本身去试一试。
好啦,本日的教程就到这里。我是磊哥,咱们下期再见! 👋
以为有效的话,记得点个在看支持一下哦! ❤️
本文已收录到我的技能小站 www.javacn.site,网站包罗的内容有:LangChain/N8N/SpringAI/SpringAIAlibaba/LangChain4j/Dify/Coze/AI实战项目/AI常见口试题等技能分享,接待各位大佬光临引导~
   

            
作者:        王磊的博客        
出处:               
   
回复

使用道具 举报

登录后关闭弹窗

登录参与点评抽奖  加入IT实名职场社区
去登录
快速回复 返回顶部 返回列表