7月14日,Stability AI在官网宣布推出Stable Doodle。Stable Doodle是一款通过文本提示+草图可直接生成高精准图片的产品,现在免费对外开放。用户只需要登录平台官网,无需注册,绘制一个草图,接着输入描述,即可生成图片。如果想要图片精准度更高,还可以选择不同的图片样式,甚至可以直接选择3D样式。
免费在线体验地址:https://clipdrop.co/stable-doodle
目前,多数图片扩散模型只能通过文本生成,得到的图片效果与预期相差较远,即便进行多次调整在角度、形态方面依然不理想。Stable Doodle则提供了全新的草图辅助功能,以及多种图片样式选择,极大提升了图片的准确率。这对于专业设计师、室内设计师以及绘画爱好者,都能获得极佳的图片生成体验。
Stable Doodle由Stable Diffusion XL模型与T2I-Adapter相结合而成。其中,T2I-Adapter是腾讯ARC实验室出品的一款文本到图片扩散模型控制器。T2I-Adapter非常小巧参数只有70M存储空间300M,但能够在冻结时给预训练的文本到图像模型提供额外指导,检测出草图的边缘图,检测出人形图形的关键姿势适配,还有基于分割的边缘对象检测器和深度检测器,这使得生成的图片在形态方面非常精准。
Stable Doodle的实用性也非常强,例如对于很多企业来说可以通过Stable Doodle制作企业标志、PPT插图、网站配图等。教育者则可以通过该平台教授绘画技巧,帮助他们提升技能。