Stability AI 再放大招,Uncrop Clipdrop 一键扩图 + 重构图片,Photoshop Generative Fill 免费平替来了。
此前,PS 的重建图像功能就让人无比振奋,让无数人惊呼
今天,Stability AI 又放大招了。它联合 Clipdrop 推出了 Uncrop Clipdrop—— 一个终极图像比例编辑器。
从 Uncrop 这个名字上,我们就能看出它的用途。
它是一个 AI 生成的「外画」工具,通过创建扩展背景,这个工具可以补充任何现有照片或图像,来更改任何图像的比例。
敲黑板:通过 Clipdrop 网站,就可以免费试用这个工具了,无需登录!
比例任意调,满意为止
Uncrop 基于 Stability AI 的文本到图像模型 Stable Diffusion XL 构建。
通过先进的算法和深度学习技术,Uncrop 会自动分析上传图像中的内容,然后生成视觉上合理的产出。
这可解了许多修图师和画手的燃眉之急了。
拍了一张近乎完美的照片,就是构图不尽人意,怎么办?Uncrop 给你一键解决!
很多时候,为了让图像显示在横幅或大画布上,我们都需要调整图像大小,把它调到合适的尺寸,而且不能扭曲,不能丢失重要的细节,Uncrop 完全解决了这样的烦恼。
拍出的横图想变竖图?Uncrop 帮你解忧。
竖图变横图?也是易如反掌。
比例不合适的照片,可以随意拉到你想要的比例。
不过呢,Uncrop 也有自己的局限性。
如果是极端的未剪裁图像,或者大量缺失内容的图像,会产生不太准确的结果。
因此,我们需要尽可能确保原始图像的高质量,才能获得最佳效果。
另外,Uncrop 是依靠算法来分析周围的像素、填补空白,它的精度可能会因为场景的复杂性而不同。
效果演示
官方的介绍效果视频:
网友们分享了自己做的外画效果实例:
上手体验
看到效果这么好,小编忍不住手痒了,立马上手实测了一波。
实操起来感受就是:操作非常方便。
就像上边的 GIF 展示的那样,选好一张图片,拖拽到页面中的指定区域。
就可以像下图这样选择自己想要扩展的范围,然后等几秒钟,平台就会生成 4 张扩展完成的图片供你挑选保存。
而且还可以针对某一张生成的图片结合 Clipdrop 的 AI 修图进行再加工。
去除背景。
锐化。
再让 AI 对处理过的图片进行风格重构。
经过几次 AI 的套娃生成加工之后,图片不仅仅被扩展了,还可以根据用户的具体需求进行风格和内容上的彻底「进化」。
这时候,就是设计师们发挥自己的创造力的时候了!
我们也针对人像,运动场景,静物场景做了一些测试。
人像原图
扩展效果
扩展出来的部分效果确实挺自然。
不过因为不能用 Prompt 指引方向,扩展的效果比较随机。
重构效果
扩展后重构效果
AI 生成人物图像的老问题手指解决的还是不理想。
而且重构之后小姐姐的身体比例稍微有点问题,颜值也感觉降低了。
静物原图
扩展效果
扩展效果比较自然,几乎看不出什么违和感。
扩展重构效果
但是重构之后线条扭曲的比较明显,整个画面的风格会有比较大的变化。
运动场景原图
扩展效果
很敏感地捕捉到了图片的动态风格,扩展效果不错。
扩展后重构效果
重构之后主体已经消失,只留下动态的模糊画面,AI 对于内容要点把握的还不好。
当我尝试想让一张风景照无限扩展变成一张全景照片时。
发现对于已经被扩展过的部分,Uncrop 的扩展功能是不能继续套娃的。
开源版 SD-XL
4 月,Stability AI 将 Stable Diffusion XL 开始面向公众测试。
值得一提的是,开源的 SD-XL 就已经达到了 Midjourney 水平,能够图像细节等方面表现更好,几乎完全可控。
关于 Stable Diffusion XL 模型的具体信息,官方并没有透露太多,目前只知道是一个与 v2 模型架构相似、但规模和参数量更大的模型。
SD-v2.1 包括 9 亿参数,SD-XL 大约有 23 亿参数,Emad 表示正式版可能会额外发布一个更小的蒸馏版本。
SD-XL 相比之前版本的改进如下:
使用较短的描述性 prompt 即可生成高质量图像
可以生成更贴合 prompt 的图像
图像中的人体结构更合理
与 v2.1 和 v1.5 版本 (程度较轻) 相比,SD-XL 生成的图片更符合大众审美
负面提示词(negative prompt)是可选项
生成的肖像图更逼真
图像中的文本更清晰
平替 PS Generative Fill,而且免费
Uncrop 从功能上来说,和 Photoshop Generative Fill 非常类似。
本质功能都是利用 AI 在指定的位置创造出图像内容。
但是相比 Uncrop,PS GF 不止能外扩图片,还能在指定的位置根据要求创造出图像。
如果用户想要对图像的细节进行更加精准的修改,PS GF 在功能上还是有很大的优势。
但是如果只是需要扩展一部分图片内容,Uncrop 已经能很好的满足要求了。
而且只要掌握一些提示词的小技巧,Uncrop+Clipdrop 同样能够按照用户的描述生成和扩展图像内容。
关键是操作简单而且完全免费!
相比于 PS GF 每个月 150 块左右的使用成本,大多数对于图像内容要求不高的用户,Stability AI 提供的这套工具应该是更理想的选择。
而且看着 Stability AI 这不断推出新功能的劲头。
感觉迟早这画图圈要被他们卷到所有功能都又好用又不要钱。
参考资料:
https://stability.ai/blog/clipdrop-launches-uncrop-the-ultimate-aspect-ratio-editor
本文来自微信公众号:新智元 (ID:AI_era)
广告声明:文内含有的对外跳转链接(包括不限于超链接、二维码、口令等形式),用于传递更多信息,节省甄选时间,结果仅供参考,IT之家所有文章均包含本声明。