SD3终于来了!Stable Diffusion 3 发布API,如何免费使用?如何在comfyUI中去调用SD3的API key

氪學家
19 Apr 202408:44

TLDR稳定性AI公司发布了全新的SD3模型,该模型在文字生成方面的能力有了显著提升,并且更具创意性。用户可以通过三种方式体验SD3:免费在线网站SDXLturbo.AI、Google Colab调用API以及ComfyUI插件。SDXLturbo.AI网站允许用户输入提示词生成图片,但有24小时生成次数限制。StabilityAI官网提供了API使用指南,用户可以注册账号并获取免费的25个积分,用于生成图片。通过Google Colab,用户可以运行官方提供的脚本来体验SD3模型。ComfyUI插件允许用户在ComfyUI中通过节点调用SD3 API,生成高质量的图片。视频还提到了即将进行的SD3与其他模型的对比测试,敬请期待。

Takeaways

  • 🚀 SD3模型由StabilityAI发布,可通过API调用,具有提升的文字生成能力和创意性。
  • 🌐 用户可以通过SDXLturbo.AI网站免费在线体验SD3模型,但有24小时生成次数限制。
  • 📈 StabilityAI官网提供了SD3模型的API接入方式,包括价格信息和如何获取API key。
  • 💳 StabilityAI提供25个免费积分,之后每1,000积分10美元,SD3模型生成一张图消耗6.5积分。
  • 🔑 用户需要登录StabilityAI账户并获取API key以使用SD3模型。
  • 📚 Google Colab提供了官方脚本,用户可以通过它来调用SD3模型生成图片。
  • 📷 在Colab中使用SD3模型生成的图片分辨率高,细节表现良好,但存在手指和牙齿细节处理的问题。
  • 📱 ComfyUI SD3 API插件允许用户在ComfyUI中调用SD3模型,需要安装插件并配置API key。
  • 🖼️ ComfyUI中使用SD3模型可以生成高质量的图片,支持多种风格和比例。
  • 📈 SD3模型在细节处理上相较于前代模型有显著提升,尤其是在皮肤和毛发纹理方面。
  • 🔄 视频还提到了未来将对SD3与其他模型进行比较,并鼓励观众关注和点赞。

Q & A

  • Stable Diffusion 3(SD3)模型的主要提升是什么?

    -SD3模型的主要提升在于其在文字生成方面的能力有了显著增强,并且更加富有创意性。

  • 如何免费体验SD3模型生成的图像?

    -可以通过访问SDXLturbo.AI的网站在线体验SD3模型,用户可以在输入框中输入提示词进行图像生成。

  • SD3模型生成的图像有哪些限制?

    -SD3模型生成的图像有24小时内只能生成三次的限制,并且不能生成一些清凉的图片。

  • StabilityAI官网提供了哪些API调用选项?

    -StabilityAI官网提供了SD3模型和SD3 Turbo等API调用选项,用户可以根据自己的需求选择不同的模型进行图像生成。

  • 如何获取StabilityAI的API key?

    -用户需要登录StabilityAI的官网,进入账号详情页面,点击API keys选项,然后点击眼睛按钮显示或复制API key。

  • 在Google Colab中使用SD3模型需要哪些步骤?

    -首先需要在StabilityAI官网获取API key,然后在Google Colab中运行官方提供的脚本,输入API key进行连接,之后可以选择SD3模型并输入提示词进行图像生成。

  • ComfyUI中如何使用SD3模型?

    -需要在ComfyUI中安装SD3 API插件,然后在节点中配置API key,最后通过输入提示词和选择参数来生成图像。

  • 使用SD3模型生成图像时,有哪些参数可以调整?

    -使用SD3模型生成图像时,可以调整的参数包括提示词、反向提示词、出图比例、图像格式、seed值以及生成模式等。

  • SD3模型生成的图像在细节上有哪些特点?

    -SD3模型生成的图像在细节上表现出色,如小女孩的头发和皮肤细节处理得很好,但在手指和牙齿等细节上可能存在一些问题。

  • 如何通过ComfyUI插件在本地使用SD3模型?

    -通过安装ComfyUI SD3 API插件,然后在插件的节点中配置SD3的API key,接着通过节点输入提示词和选择参数来本地生成图像。

  • SD3模型的API调用价格如何?

    -SD3模型的API调用价格是每1,000个积分10美元,生成一张图像消耗6.5个积分,而SD3 Turbo模型消耗4个积分。

  • 如何查看StabilityAI账户剩余的积分?

    -登录StabilityAI官网后,点击右上角的头像进入账号详情,然后在账单部分可以查看当前剩余的积分。

Outlines

00:00

🚀 Introduction to SD3 Model and Experience Methods

The video introduces the SD3 model by StabilityAI, highlighting its improved text generation capabilities and creativity. It outlines three methods to experience SD3: a free online website, using Google Colab with API, and through ComfyUI with a node. The first method involves using SDXLturbo.AI for quick online image generation with a limit of three images every 24 hours. The second method details the process of accessing and using the SD3 model via StabilityAI's official website, including API key retrieval and Google Colab script execution. The third method demonstrates using the SD3 model within ComfyUI by installing a plugin and configuring it with an API key for image generation.

05:00

🎨 SD3 Image Generation and API Usage

The video demonstrates generating images using the SD3 model through various platforms. It first shows the process of using the SD3 model on StabilityAI's website, noting the absence of text in the generated image and issues with fingers and teeth details. The API usage is confirmed by the deduction of 6.5 credits from the account. Then, the video moves on to using the SD3 model in ComfyUI with a plugin, showing how to install and configure it. The process includes adding nodes, configuring the API key, and generating images with different aspect ratios and styles. The video concludes with a teaser for a future comparison between SD3 and MJ models and an invitation for viewers to like, follow, and support the channel.

Mindmap

Keywords

💡Stable Diffusion 3 (SD3)

Stable Diffusion 3 (SD3)是由StabilityAI开发的最新模型,它在文本到图像的生成能力上取得了显著进步,更加富有创意性。在视频中,SD3被用来生成具有特定描述的图像,展示了其在细节和创意上的强大能力。

💡API

API(应用程序编程接口)是一种允许不同软件之间进行交互的协议。在视频中,API的使用允许用户通过编程方式调用SD3模型来生成图像,这为自动化和集成提供了便利。

💡ComfyUI

ComfyUI是一个用户界面平台,它允许用户通过图形化界面进行操作。视频中提到了ComfyUI中使用SD3模型的插件,这使得用户可以通过节点配置来调用SD3的API,简化了图像生成的过程。

💡内测

内测指的是在软件或产品正式发布前,由特定用户群体进行的测试。这有助于发现并修复问题,视频中提到SD3在正式发布前已经进行了内测。

💡积分系统

积分系统是一种激励机制,用户通过积分可以兑换服务或产品。在视频中,StabilityAI的API使用了一个积分系统,用户通过消耗积分来使用SD3模型生成图像。

💡Google Colab

Google Colab是一个云端的协作平台,支持机器学习和数据分析。视频中提到了通过Google Colab调用SD3的API来生成图像,这展示了如何利用云端资源进行图像生成。

💡提示词

提示词是用来指导图像生成模型生成特定风格或内容图像的关键词或短语。视频中多次提到使用特定的提示词,如'1 girl says yes',来生成具有相应描述的图像。

💡模型比较

模型比较是指对不同图像生成模型的性能和效果进行评估和对比。视频中提到了将SD3与其他模型进行比较的计划,以探讨其在图像生成领域的竞争力。

💡文字生成

文字生成是指模型根据文本描述生成图像的能力。SD3的一个亮点是其在文字生成方面的能力,能够根据文本提示生成包含文字的图像,这在视频中得到了展示。

💡图像分辨率

图像分辨率是指图像的清晰度,通常以水平×垂直像素数来表示。视频中提到了通过SD3生成的图像具有较高的分辨率,如1216×832,这表明了模型在图像细节处理上的能力。

💡插件安装

插件安装是指在软件或平台中添加额外的功能模块。视频中展示了如何在ComfyUI中安装SD3 API的插件,以便用户能够更方便地使用SD3模型。

Highlights

Stable Diffusion 3 (SD3) 模型已经发布并可通过API调用使用

SD3模型在文字生成方面的能力有显著提升,更具创意性

SD3自2月22日起已开启内测

通过SDXLturbo.AI网站可以免费在线体验SD3模型

SD3模型能够生成包含文字的图片

SDXLturbo.AI网站24小时内限制生成三次图片

StabilityAI官网提供SD3模型的API配置和价格信息

使用SD3模型生成一张图消耗6.5个积分

Stability AI账户初始有25个免费积分

Google Colab提供了SD3模型的脚本,方便用户使用

通过API调用SD3模型生成的图片分辨率高,细节处理良好

SD3模型在手指和牙齿等细节上存在一些问题

ComfyUI中通过SD3 API插件可以调用SD3模型

ComfyUI SD3 API插件安装简单,使用方便

SD3模型生成的图片风格多样,可根据提示词生成不同风格作品

SD3模型在细节方面相较于前代有显著进步

视频提供者将在下一期进行SD3与其他模型的对比分析