文生图升级-DALL·E3局部重绘重磅来袭!

吴溪源
2024-04-04

AIGC-文生图

总所周知,在AI绘图领域,由GPT4加持的DALL·E3在语义理解方面是独一枝的存在。虽然Midjourney (MJ) 的图很好看,虽然Stable Diffusion(SD)可以自定义很多内容,但是在面对具体的画面需求的时候,我们也经常会看到这两位大哥累个半死也画不出我们想要的画面,这个时候就体现出DALL·E3的强大之处了。


而现在,DALL·E3又推出了一个非常重磅的功能——局部重绘。这对于我们想要绘制出自己特定需要的画面,简直是如虎添翼。


为什么说这个功能很重要呢?因为在以前,DALL画的图虽然很精准,但是如果我们对有些局部不满意,我们是只能重画的,效率较低,而且重绘后画面也会变化。

比如我们要绘制一幅这样的画面。

DALL-E1.jpg


图1. DALL-E根据提示词生成的小猫摸鱼的图片

图1中DALL-E对生成图片的描述:

I've created images of a small cat trying to catch a fish, set in a cozy indoor scene. The illustrations show the kitten reaching towards a fish bowl with a playful and inquisitive demeanor. The warm colors and soft lighting add to the charm of the moment, capturing the kitten's fluffy appearance and the fish swimming peacefuly inside the bowl. These images aim to reflect the whimsy and   endearment of such a playful household moment.


然后,我让DALL-E对第一幅图进行修改。


DALL-E2.jpg

图2. DALL-E全部重绘后的图片


图2中DALL-E重绘后的说明:

Here's an illustration that keeps the charming scene and style of the previous image but features an adorable puppy in place of the kitten. The playful puppy is reaching out towards the fish bowl,just as the kitten did, with an expression of curiosity and playfulness.


可以看到在DALL强大的语义理解下,画风确实保持了统一,但是构图还是不可避免的改变了。


而现在,我们可以用DALL·E3来修改图片。

DALL-E3.jpg

图3. 点击DALL-E3软件右上角的编辑按钮。


用画笔将想要修改的区域进行涂抹。

DALL-E4.jpg

图4. 涂抹要修改的区域


输入想要更改的样子,就可以得到一张其他部分不变,图5与图1比较可见,只替换涂抹部分的图片了。

DALL-E5.jpg

图5. DALL-E3修改后的图片

图片修改后的描述:

Now the scene features a small puppy in the same inquisitive pose as the previous kitten, paw out stretched toward the fishbowl. The warm room and the curious gaze of the puppy give this moment a playful touch, just as whimsical and endearing as before but with a new, fluffy character.


今天清明节,我们再来绘制一个和清明相关主题的画面吧。


画面灵感取自杜牧的《清明》——清明时节雨纷纷,路上行人欲断魂。借问酒家何处有?牧童遥指杏花村。

DALL-E6.jpg

图6. 杜牧的《清明》图初稿


第一张图还不错,但是画面中多了一个人,而且右侧的建筑离得太近了,凸显不出“遥指”的感觉。(离这么近,你不会真的看不到吧?),所以我选中右侧房子进行调整。


DALL-E7.jpg

图7. 涂抹要修改的局部


填写要替换成的元素就可以了,替换进去的元素和场景无缝融合。

DALL-E8.jpg

图8. DALL-E3修改后的效果

图片修改后的描述:

The updated scene now features a river, trees, and mountains, capturing the tranquil essence of the natural landscape under a sky with light rain, all while adhering to the traditional Chinese ink painting style.


为了显示对下雨的尊重,再给诗人带上一顶斗笠吧。

DALL-E9.jpg

图9. 给诗人添加斗笠


ok,现在这幅《清明》我们就画好了。

DALL-E10.jpg

图10. 修改完成


图10修改后的描述:

The scene now includes a figure wearing a traditional conical hat, adding a human element to the tranquil natural landscape under a sky with light rain.


不得不说,加上了局部重绘的DALL-E3真是太好用了,能自然语言进行描述和调整也是最符合人的使用逻辑的,可以不用去记复杂的参数和语法。



扩展阅读

免费AI文生图, 实战阿里通义万相精彩作品集一

财新PMI创1年新高,中国经济迎来光明的开局

分享