阿里的Qwen3 VL多模态模型具备强大视觉识别能力,核心应用场景是图片反推prompt生成。本文详细介绍了在ComfyUI中部署该模型的步骤,包括安装节点、调整工作流程及使用方法。通过输入图片,模型可生成相应prompt,用于Flux、Wan 2.2等文生图模型制作相似图片。文章还提醒注意环境配置和版本兼容性问题,避免升级后出现错误,适合程序员和小白学习收藏。
今天要分享的是阿里的 Qwen3 VL 多模态模型,具备超强的视觉识别能力。用来做视频、图片的反推简直不要太方便。这是它在 github 的官网地址:https://github.com/QwenLM/Qwen3-VL
其实这个模型出来好几个月了,它的老版本 Qwen 2.5,2025 年初就已经发布,Qwen3-VL 是其最新升级版。
它的应用场景是什么?
看了前面的介绍,我们可能还是搞不清楚它是个干啥的模型,到底能做什么。
说个非常具体的例子:我们玩 AI 文生图的时候,有时候看到别人的作品感觉非常惊艳,自己也想试着制作一个类似的。此时经常说的一句就是:能不能给一下你的 prompt(文生图提示词)?
Qwen3 VL 的一个典型应用场景就是我们输入给它一张图片,它来识别,然后输出给我们这张图片的 prompt。我们用生成的 prompt 送给 Flux、Wan 2.2 等等其他文生图模型,就能制作和原图相似的图片。
开始部署
因为只是简单的本地部署体验,暂时还用不到精细化控制,所以采用在 ComfyUI 中做部署。
这次安装的是:ComfyUI_Qwen3-VL-Instruct,这是它的 github 地址:https://github.com/IuvenisSapiens/ComfyUI_Qwen3-VL-Instruct/tree/main
第一步,安装节点
打开 Comfy UI,点击 “Manager”,然后点击 “Custom Nodes Manager”, 打开面板。
然后输入”Qwen3-VL-Instruct“进行搜索。如图:
点击安装,第一步完成。
第二步,调整 workflow,替换 Show Text 节点
其实安装完成后,在/Users/xxxx/Documents/ComfyUI/custom_nodes/ComfyUI_Qwen3-VL-Instruct/examples 目录下就能找到这个自定义节点自带的 workflow:
把这里的 workflow json 文件拖进来即可。
只是我本地 mac 上使用过程中,最终显示结果的文本节点,显示的是乱码。所以将其替换成了
ComfyUI-Show-Text(节点 github 地址为:https://github.com/fairy-root/ComfyUI-Show-Text)。其他节点不变。最终的 workflow 如下:
单图反推
多图反推
相比于上面的 workflow,这里只是多了一个 Multiple Path Input 节点。
使用
使用非常简单,选择好要反推的图片后,点击运行即可。
只是在 mac 上性能一般,平均差不多都要35 秒上下。
如果是首次配置,它会自动下载模型文件到本地,稍微等待一下即可(具体时间就看自己的网络好不好了)。
等不及的话可以到 Hugging Face 自己下载: https://hf-mirror.com/Qwen/Qwen3-VL-4B-Instruct/tree/main ,下载后配置到本地的:ComfyUI/models/prompt_generator/ 目录下。(可以考虑手动下载比较大的model-00001-of-00002.safetensors和 model-00002-of-00002.safetensors文件,其他小文件让 comfyui 自己下载)
其他
要注意的是环境问题,最近 ComfyUI发布了新版本:0.3.76。这个版本新引入了 Nodes 2.0。一些老的自定义节点如果兼容不好,运行时就会报错:
记得在这里关闭后再试试,我本地的 Qwen3-VL 就是报这个错,关闭后可以运行。
如无必要真的不要升级 ComfyUI 版本,升级后我的单独反推工作流就翻车了
不想再折腾,就改了改多图反推工作流。改成下图这样:
这个模型真的很强,像我这样反推 prompt ,做图片克隆真的有点大才小用。
最后
我在一线科技企业深耕十二载,见证过太多因技术卡位而跃迁的案例。那些率先拥抱 AI 的同事,早已在效率与薪资上形成代际优势,我意识到有很多经验和知识值得分享给大家,也可以通过我们的能力和经验解答大家在大模型的学习中的很多困惑。
我整理出这套 AI 大模型突围资料包:
- ✅AI大模型学习路线图
- ✅Agent行业报告
- ✅100集大模型视频教程
- ✅大模型书籍PDF
- ✅DeepSeek教程
- ✅AI产品经理入门资料
完整的大模型学习和面试资料已经上传带到CSDN的官方了,有需要的朋友可以扫描下方二维码免费领取【保证100%免费】👇👇
为什么说现在普通人就业/升职加薪的首选是AI大模型?
人工智能技术的爆发式增长,正以不可逆转之势重塑就业市场版图。从DeepSeek等国产大模型引发的科技圈热议,到全国两会关于AI产业发展的政策聚焦,再到招聘会上排起的长队,AI的热度已从技术领域渗透到就业市场的每一个角落。
智联招聘的最新数据给出了最直观的印证:2025年2月,AI领域求职人数同比增幅突破200%,远超其他行业平均水平;整个人工智能行业的求职增速达到33.4%,位居各行业榜首,其中人工智能工程师岗位的求职热度更是飙升69.6%。
AI产业的快速扩张,也让人才供需矛盾愈发突出。麦肯锡报告明确预测,到2030年中国AI专业人才需求将达600万人,人才缺口可能高达400万人,这一缺口不仅存在于核心技术领域,更蔓延至产业应用的各个环节。
资料包有什么?
①从入门到精通的全套视频教程⑤⑥
包含提示词工程、RAG、Agent等技术点
② AI大模型学习路线图(还有视频解说)
全过程AI大模型学习路线
③学习电子书籍和技术文档
市面上的大模型书籍确实太多了,这些是我精选出来的
④各大厂大模型面试题目详解
⑤ 这些资料真的有用吗?
这份资料由我和鲁为民博士共同整理,鲁为民博士先后获得了北京清华大学学士和美国加州理工学院博士学位,在包括IEEE Transactions等学术期刊和诸多国际会议上发表了超过50篇学术论文、取得了多项美国和中国发明专利,同时还斩获了吴文俊人工智能科学技术奖。目前我正在和鲁博士共同进行人工智能的研究。
所有的视频教程由智泊AI老师录制,且资料与智泊AI共享,相互补充。这份学习大礼包应该算是现在最全面的大模型学习资料了。
资料内容涵盖了从入门到进阶的各类视频教程和实战项目,无论你是小白还是有些技术基础的,这份资料都绝对能帮助你提升薪资待遇,转行大模型岗位。
智泊AI始终秉持着“让每个人平等享受到优质教育资源”的育人理念,通过动态追踪大模型开发、数据标注伦理等前沿技术趋势,构建起"前沿课程+智能实训+精准就业"的高效培养体系。
课堂上不光教理论,还带着学员做了十多个真实项目。学员要亲自上手搞数据清洗、模型调优这些硬核操作,把课本知识变成真本事!
如果说你是以下人群中的其中一类,都可以来智泊AI学习人工智能,找到高薪工作,一次小小的“投资”换来的是终身受益!
应届毕业生:无工作经验但想要系统学习AI大模型技术,期待通过实战项目掌握核心技术。
零基础转型:非技术背景但关注AI应用场景,计划通过低代码工具实现“AI+行业”跨界。
业务赋能 突破瓶颈:传统开发者(Java/前端等)学习Transformer架构与LangChain框架,向AI全栈工程师转型。
👉获取方式:
😝有需要的小伙伴,可以保存图片到wx扫描二v码免费领取【保证100%免费】🆓**