wow空荡荡的巢穴绘画小白们,还在为自己的「手残」而苦恼吗?是否常常在想,何时才能把那粗糙线条变得灵动逼真?
这名字,这熟悉的感觉,别怀疑,这款工具就是 Stability AI 即将推出的将草图转化为图像的新服务。
首先,你需要利用鼠标,在空白画布上画出你想要图像的大致线条。画不好?不用担心。
机器之心谨代表「手残」中的「战斗机」帮大家试试水。经过用时 3 秒、紧张刺激的简笔画学习后,机器之心在画布上画下一颗心脏和一个齿轮。
然后,在文字框中输入相关内容。机器之心输入了「 machine heart」。
当然,需要注意的是,Stable Doodle 现在只提供了 14 种风格供选择,至于未来是否会增加更多选择就不得而知了。
除了对绘图小白友好之外,该工具还能让设计、插画等领域的工作更便捷、高效。
其实市面上已经有不少草图到图像的 AI 工具了,但 Stability AI 表示,他们的工具最大优势为它允许对图像生成进行更「精确」的控制。
这是因为为 Stable Doodle 提供动力的是 Stable Diffusion XL。它与腾讯研发部门应用研究中心(ARC)开发的「条件控制解决方案」相配对。该控制解决方案称为 T2I-Adapter,既允许 Stable Diffusion XL 接受草图作为输入,又指导模型更好地微调输出图稿。
Stability AI 在推特中表示,T2I-Adapter 与 controlnet 相似,但是效果会更好。通过将可训练的参数添加到现有的大型扩散模型中,T2I-Adapter 可以包含额外的输入条件,如草图、分割图或关键姿势。该框架同时支持多个输入引导模型,增强了对生成过程的控制。对于 Stable Doodle 用例,T2I-Adapter 为预先训练的文本到图像模型 (SDXL) 提供补充指导,使其能够理解草图的轮廓,并根据提示与模型定义的轮廓相结合生成图像。
|