SD3终于来了!Stable Diffusion 3 发布API,如何免费使用?如何在comfyUI中去调用SD3的API key

氪學家
19 Apr 202408:44

TLDRStabilityAI 宣布了全新的 SD3 模型,该模型在文字生成方面的能力有了显著提升,并且更加富有创意性。用户可以通过三种方式体验 SD3:免费在线网站 SDXLturbo.AI,Google Colab 调用 API,以及 ComfyUI 中通过插件使用。SDXLturbo.AI 网站允许用户输入提示词生成图片,但有24小时三次的限制。StabilityAI 官网提供了 SD3 模型的 API 使用指南,包括价格信息和配置方法。通过 Google Colab 可以运行官方提供的脚本进行图片生成。ComfyUI SD3 API 插件允许用户在 ComfyUI 中方便地调用 SD3 模型。视频还展示了如何通过这些方法生成图片,包括在 ComfyUI 中配置 API key 并生成具有特定风格的图片。最后,视频预告了下一期将进行 SD3 和其他模型的对比。

Takeaways

  • 😀 SD3模型由StabilityAI发布,提供了通过API调用的方式。
  • 😃 SD3的亮点包括在图像生成中增强的文字生成能力和创意表现。
  • 😄 SD3可以通过网站免费在线体验,Colab或ComfyUI通过API调用进行使用。
  • 😁 通过SDXLturbo.AI网站,用户可体验SD3生成图像的功能,每24小时限制三次免费生成。
  • 😆 SD3和SD3 Turbo的使用在StabilityAI官网通过API可查,初次注册可获得免费积分。
  • 😅 在Google Colab中配置和运行SD3模型的过程被详细演示,便于用户理解和操作。
  • 😂 使用SD3生成的图像在细节处理上有明显进步,尽管有时会出现手指和牙齿的生成问题。
  • 🤣 在ComfyUI中,通过安装SD3 API插件可以集成SD3功能,增强图像处理流程。
  • 😍 通过API生成的图像尽管有限制,但可通过购买积分继续使用服务。
  • 😎 演示强调了SD3模型相对于早期模型在图像生成细节方面的显著优势和进步。

Q & A

  • Stable Diffusion 3(SD3)模型是什么?

    -Stable Diffusion 3(SD3)是由StabilityAI宣布的全新模型,它在文字生成方面的能力有显著提升,并且更加富有创意性。

  • 如何免费在线体验SD3模型?

    -可以通过访问SDXLturbo.AI的网站进行在线体验。用户可以在输入框中输入提示词来生成图片,但该网站有24小时只能生成三次图片的限制。

  • 如何通过API使用SD3模型?

    -首先需要在StabilityAI官网注册账号并获取API key,然后在Google Colab中使用提供的脚本,通过API key调用SD3模型进行图片生成。

  • SD3模型生成图片的费用是如何计算的?

    -SD3模型生成一张图片消耗6.5个积分,而SD3 Turbo模型则消耗4个积分。用户初始有25个免费积分,之后可以按需购买积分,每1,000个积分的价格是10美元。

  • 在ComfyUI中如何使用SD3模型?

    -需要先安装ComfyUI SD3 API插件,然后在ComfyUI中添加SD3节点,并在节点的config文件中粘贴API key,之后就可以输入提示词并生成图片了。

  • SD3模型在图片生成中可以包含文字吗?

    -是的,SD3模型的一个亮点是可以在生成的图片中包含文字。不过,生成的文本准确性可能会受到提示词的影响。

  • 使用SD3模型生成的图片有哪些常见的问题?

    -使用SD3模型生成的图片可能存在的问题包括文本显示不准确、手指和牙齿等细节部位的渲染问题。

  • 如何提高SD3模型生成图片的质量?

    -可以通过调整提示词、改变出图比例、选择不同的模型(如SD3 Turbo)以及调整其他相关参数来提高生成图片的质量。

  • 在StabilityAI官网上如何查看和管理我的API积分?

    -登录StabilityAI官网账号后,可以点击右上角的头像进入账号详情,再点击账单部分查看剩余积分和购买更多积分。

  • 如何复制和粘贴SD3的API key?

    -在StabilityAI官网的API keys页面,可以点击API旁边的眼睛按钮显示整条API key,然后使用复制按钮复制它,并在需要的地方粘贴。

  • 视频中提到的ComfyUI SD3 API插件的安装步骤是什么?

    -首先复制插件的地址,然后在ComfyUI中通过manager从网址安装选项粘贴该地址并安装,安装完成后重启ComfyUI,并在节点文件夹下的config文件中粘贴API key。

  • 视频提到了哪些体验SD3模型的方法?

    -视频提到了三种体验SD3模型的方法:通过SDXLturbo.AI网站免费在线体验,通过Google Colab调用API使用,以及在ComfyUI中通过安装SD3 API插件来使用。

Outlines

00:00

🚀 Introduction to SD3 Model and Its Usage

The video introduces StabilityAI's new SD3 model, which has been released for public use via API. Initially announced on February 22nd, the model is praised for its improved text generation capabilities and creativity. The video outlines three methods to experience SD3: a free online website, using Google Colab with API, and through ComfyUI with a node. The first method involves using the SDXLturbo.AI website, which has a limit of three image generations per 24 hours. The second method details how to access and use the SD3 model through StabilityAI's official website, including the process of logging in with a Google account, checking the pricing, and configuring the API. The third method demonstrates using the SD3 model within the ComfyUI application by installing a plugin and configuring it with an API key.

05:00

🎨 SD3 Model Image Generation and Comparison

The video demonstrates generating images using the SD3 model with various settings and compares the results. It shows the process of generating an image through the SD3 model via API, noting the high resolution and detail of the generated image, but also pointing out issues with text display and common AI-generated flaws in fingers and teeth. The video also discusses the cost associated with using the SD3 model via API and shows how to install and use the SD3 API plugin in ComfyUI. It concludes with a brief mention of a future comparison between SD3 and MJ models and encourages viewers to follow the channel for updates.

Mindmap

Keywords

💡Stable Diffusion 3 (SD3)

Stable Diffusion 3 (SD3) 是由 StabilityAI 宣布的全新模型,它在文字生成方面的能力有显著提升,并且更具创意性。在视频中,SD3 被用来生成图像,展示了其在细节处理上的进步,如生成包含文字的图片等。

💡API

API(应用程序编程接口)是一种允许不同软件应用之间进行交互的协议。在视频中,SD3 通过 API 提供服务,用户可以通过调用这个 API 来使用 SD3 模型生成图像。

💡ComfyUI

ComfyUI 是一个用户界面,允许用户通过图形化界面操作复杂的功能。视频中提到了在 ComfyUI 中通过节点来使用 SD3 的 API,这表明 ComfyUI 提供了一种更直观的方式来调用 SD3 的功能。

💡内测

内测指的是在软件或产品正式发布前,由开发者或一小部分用户进行的测试。视频中提到 StabilityAI 在 2 月 22 日发布了 SD3 的介绍页面,并开启了内测,意味着只有特定的用户群体可以提前体验 SD3。

💡积分系统

积分系统是一种激励机制,通常用于奖励用户的行为或购买服务。在视频中,StabilityAI 提供了一个积分系统,用户通过积分来使用 SD3 模型,初始有 25 个免费积分,之后可以购买更多积分。

💡Google Colab

Google Colab 是一个云端的协作平台,支持用户编写和执行代码。视频中提到了通过 Google Colab 调用 SD3 的 API 来生成图像,这表明 Google Colab 提供了一种方便的方式来使用 SD3。

💡模型比较

模型比较是指对不同模型的性能、效果等进行对比分析。视频中提到了 SD3 与之前模型如 SDXL 和 SD1.5 的比较,尤其是在细节生成方面的进步。

💡提示词

提示词是用来指导图像生成模型生成特定风格或内容的关键词或短语。在视频中,用户通过输入提示词如 '1 girl says yes' 来指导 SD3 生成包含文字的图像。

💡图像生成

图像生成是指根据输入的提示词或条件,由算法自动创建图像的过程。视频中 SD3 被用来生成图像,展示了其在生成具有特定风格和内容的图像方面的能力。

💡插件

插件是一种软件组件,可以添加到现有的应用程序中以增加或扩展其功能。视频中提到了 ComfyUI SD3 API 的插件,用户通过安装这个插件来在 ComfyUI 中使用 SD3 的功能。

💡配置 API

配置 API 是指设置 API 的使用参数,包括 API 密钥等,以便应用程序可以正确地调用 API 服务。在视频中,用户需要在 ComfyUI 的节点配置文件中粘贴 SD3 的 API key 来启用 SD3 功能。

Highlights

StabilityAI宣布了全新的SD3模型,可以通过API调用使用。

SD3模型在文字生成方面的能力有显著提升,更具创意性。

SD3模型已在2月22日发布介绍页面并开启内测。

通过SDXLturbo.AI网站可以免费在线体验SD3模型。

SD3模型能在图片中生成文字。

SDXLturbo.AI网站24小时限制生成三次图片。

StabilityAI官网提供SD3模型的API配置和价格信息。

使用SD3模型做图消耗6.5个积分,SD3 Turbo消耗4个积分。

StabilityAI提供25个免费积分,每1,000个积分10美元。

通过Google账号可以登录StabilityAI官网。

Google Colab提供了SD3模型的脚本,可以快速开始使用。

在Colab中使用SD3模型需要输入API key。

SD3模型生成的图片分辨率高,细节处理不错。

SD3模型在手指和牙齿等细节上存在一些问题。

ComfyUI中通过SD3 API插件可以使用SD3模型。

ComfyUI SD3 API插件安装简单,通过节点使用。

在ComfyUI中使用SD3需要API key,并在config文件中配置。

SD3模型在ComfyUI中生成的图片效果优秀,支持多种风格。

视频承诺下一期将进行SD3与其他模型的对比分析。