在创意人士年度会议 MAX 上,Adobe 今天宣布更新了为其生成式 AI 图像创建服务Firefly提供支持的模型。据 Adobe 称,Firefly Image 2 模型(其正式名称为 Firefly Image 2 Model)将能够更好地渲染人类,例如,包括面部特征、皮肤、身体和手部(这些长期以来一直困扰着类似的模型)。
Adobe 今天还宣布,自大约半年前推出该服务以来,Firefly 的用户现已生成了 30 亿张图像,仅上个月就生成了 10 亿张图像。绝大多数 Firefly 用户 (90%) 对 Adobe 产品也是全新的。这些用户中的大多数肯定会使用 Firefly Web 应用程序,这有助于解释为什么几周前该公司决定将 Firefly 的演示网站转变为成熟的 Creative Cloud 服务。
Adobe 负责生成 AI 和 Sensei 的副总裁 Alexandru Costin 告诉我,新模型不仅使用来自 Adob??e Stock 和其他商业安全来源的最新图像进行训练,而且它的尺寸也明显更大。“Firefly 是多个模型的集合,我认为我们已经将它们的大小增加了三倍,”他告诉我。“所以它就像一个三倍大的大脑,它知道如何建立这些连接并为用户呈现更漂亮的像素和更漂亮的细节。” 该公司还将数据集增加了近两倍,这反过来应该让模型更好地理解用户的需求。
那个更大的模型显然更需要资源密集型,但 Costin 指出它应该以与第一个模型相同的速度运行。“我们正在继续在蒸馏、修剪、优化和量化方面进行探索和投资。我们需要做很多工作来确保客户获得类似的体验,但我们不会让云成本膨胀太多。” 不过,目前 Adobe 的重点是质量而不是优化。
目前,新模型将通过 Firefly Web 应用程序提供,但在不久的将来,它也将出现在 Photoshop 等 Creative Cloud 应用程序中,为生成填充等流行功能提供支持。这也是科斯汀强调的。他说,Adobe 对生成式人工智能的思考方式与其说是内容创建,不如说是生成式编辑。
“我们看到我们的客户所做的,这就是 Photoshop 生成填充如此成功的原因,不仅仅是生成新资产,而是利用现有资产(照片拍摄、产品拍摄),然后使用生成功能从根本上增强现有资产工作流程。因此,我们将生成定义的总称称为比文本到图像更生成的编辑,因为我们认为这对我们的客户来说更重要。”
通过这个新模型,Adobe 还在 Firefly Web 应用程序中引入了一些新控件,现在允许用户设置图像的景深以及运动模糊和视野设置。另外一个新功能是上传现有图像,然后让 Firefly 匹配该图像的风格,以及在编写提示时使用新的自动完成功能Adobe 表示该功能经过优化,可帮助您获得更好的图像。