WithAI.Design

5 min read

gpt4o很能打是吧?接入ComfyUI和Figma!

gpt4o很能打是吧?接入ComfyUI和Figma!

注意哈,本文主要探讨和尝试将最新的gpt-4o 图像模型接入到 ComfyUI 和 Figma 中,由于 OpenAI 官方并未开放该模型的 API,所以大家还是等待一定时间后再尝试!

前言

经过这几天网友们的测试,GPT-4o 真的表现太强了!强到研究 ComfyUI 工作流的同学们都直呼“emo”了😂,连设计师都开始担忧饭碗是不是要被 AI“抢走”。

不过冷静下来思考一下,我们会发现 GPT-4o 与 ComfyUI 实质上并不是一回事儿——4o 是强大的 AI 大模型,而 ComfyUI 则是一个流程化的工作流编排工具。事实上,ComfyUI 完全可以将 GPT-4 o 集成为其中的重要节点之一,更好地服务于我们的创意工作流。

对于设计师们而言,其实也不必过于担心被 AI 替代。AI 更准确地说是一种工具,有了它,优秀的设计师能够将创作效率发挥到极致,而真正被取代的可能只是那些不愿意拥抱工具变化的人

正是基于这样的思考,才引出今天的话题——我们要如何更有效、更高效地利用 GPT-4 o 呢?

虽然官方尚未正式开放绘图 API,但已有技术大佬率先开发了 GPT-4 o 的绘图 API,并公开发布了对应的 ComfyUI 插件。这样一来,我们便能轻松将 GPT-4 o 集成至 ComfyUI,形成更加智能且高效的创作流程——从此,我们的设计流程又添一员强大的“猛将”!

先看效果

可以在 Figma 中直接调用,当然,你可以直接在 ComfyUI 中使用。我只是让 4o 更接近设计师一点😂。

电商换图

图标风格转绘

比起 IPA、Redux 的味道更对了!话说 WWDC 的主视觉应该是就 iOS 19 的设计风格了吧?

插画风格重绘

画 UI

UI 的风格很到位,只要需求下对,信息架构和视觉都比得上高级水平的设计师了!

这 UI 的设计审美很在线,如果再转为 Figma 设计稿,那就完美了!😎

工作流

工作流主要用到 ainewsto 大佬的插件。插件地址:https://github.com/ainewsto/Comfyui_Comfly。 目前 ComfyUI 还做不到上下文对话,所以分了几个工作流。其实工作流并不复杂,以两图为例:

核心是需要获得 gpt-4o-image 的 API。由于不是官方的 api,我这里就不给链接了,大家可以到 B 站上找找。

部署到 Deploy 服务器

将工作流部署到 Deploy 服务器。

这样可以调用这个工作流了。

Figma 中调用。

视频演示

写在最后

没错,这其实只是一次前瞻性的尝试,目前的可用性仍有局限性。一个主要问题是响应速度,使用 GPT-4 o 绘图 API 时等待的时间仍然较长,其官方演示的网页速度其实也不快。另外,在实际应用中,还需要考虑特定场景的特殊需求,比如电商场景之下,产品细节、样式和功能特点具有较高的实时性和多样性,以及品牌方对于设计细节、配色、图案的精准要求,因此目前尚无法直接将 AI 输出的结果完全替代现有人类设计师的工作。

但不可否认的是,这一趋势已经不可逆转:AI 生成图片和创意设计能力会逐渐向模型自身内化,用户与 AI 模型之间的交互将变得越来越简单和直观,让非专业人士也能快速获得接近专业水平的高清结果。

而对于 ComfyUI 来说,AI 技术能力的进步反而为其提供了一个更大的潜在空间。因为 ComfyUI 的本质并不仅仅是“生成图片”,相反,其核心价值在于能力的整合与串联——将多个 AI 能力模块化,以流程化、图形化的界面展现给用户。正因为这种灵活的“工作流拼接”能力,它将始终具备自己的独特价值:无论是 GPT-4 o、稳定扩散 SDXL、FLUX 等现有主流模型,还是将来更多更强大的模型,ComfyUI 都可以将它们有效整合在一起

想获取更多 AI 辅助设计和设计灵感趋势? 欢迎关注我的公众号(设计小站):sjxz 00。

标签