明敏发自凹非寺量子位|公众号qbitai用ai画画

天天见闻 天天见闻 2023-04-30 科技 阅读: 132
摘要: AI都可以实时移交,还能控制通过提示词生成图像的内容和风格,“AI马上调整了作画方向,这就是最新点燃的AI实时作画项目。AI可以更大程度地帮助人类艺术家创作。然后,将每次落笔后的草图发送到Automatic 1111的API接口,并在图像生成方面使用了ControlNet的scribble模式细化效果。

明敏 发自 凹非寺

量子位 | 公众号 QbitAI

现在用AI画画,完整草图都不需要了。

每一笔落下,AI都会实时交上“新作业”

细节、颜色、画布空白,它都自动补全。

还能通过提示词来控制生成图像的内容和风格。

比如加一句“ 一个穿长外套的男人站在海边“,AI立马调整了作画方向:

最后成稿的作品如下,效果很奈斯。

明敏发自凹非寺量子位|公众号qbitai用ai画画

怪不得网友表示,自己惊掉的下巴已经找不到了。

这就是最新火起来的AI实时作画项目,Reddit上的热度有 1.8万。

明敏发自凹非寺量子位|公众号qbitai用ai画画

有人还表示,这回似乎说明了,相较于取代人类,AI可能更大程度上会帮助人类艺术家创作。

一个脚本搞定

如上效果是靠一个 Python脚本实现。

通过构建一个画布和一个图像生成框,然后把每次落笔后的草图发送给Automatic 1111的API接口,这样就能基于Stable Diffusion和ControlNet的能力作画了。

其中,Automatic 1111是一个基于Stable Diffusion的可便携部署的离线框架,封装了UI和一些功能,能通过可视化界面使用Stable Diffusion。

此外生成图像方面还使用了ControlNet的scribble模细化效果。

作者提醒说,想要让这个脚本能正常运行,一定要确保能调用Automatic 1111 webui的API,并且已经安装激活了ControlNet扩展。

可以通过修改payload.json文件来获取不同的prompt、seed和ControlNet模型。

在实时生成的速度上,作者表示现在看到的demo是他加速4倍后的结果,具体情况如何,恐怕还要看大家的显卡水平了。

所以不少网友看后的反应是:

实时?我的显卡说,你在做梦。

明敏发自凹非寺量子位|公众号qbitai用ai画画

1080要再次哭晕了……

明敏发自凹非寺量子位|公众号qbitai用ai画画

也大佬推算了各个型号显卡可能带来的效果:

我上次使用Automatic1111时,用3080能实现每秒12次迭代;对于预览图片来说,或许不需要这么多迭代。

所以如果用3080的话,大概可以每1-2秒得到一张图片预览(3060可能是3-4秒);如果用4080、4090,不到1秒就能出一张预览。

明敏发自凹非寺量子位|公众号qbitai用ai画画

尽管硬件上还是有制约的……但这还是没影响大家的脑洞。

有人表示,这或许是未来很多艺术家搞创作的方式了。

明敏发自凹非寺量子位|公众号qbitai用ai画画

还有人说,未来已来了。

明敏发自凹非寺量子位|公众号qbitai用ai画画

你觉得呢?

GitHub地址:

— 完—

《中国AIGC算力产业全景报告》征集启动

AIGC算力需求爆发,谁将在此次算力产业变革中脱颖而出?

量子位《中国AIGC算力产业全景报告》和 《最值得关注的AIGC算力玩家》正式启动对外征集,期待有更多优秀的机构产品、案例与技术能够被大众看到。

点这里 ?关注我,记得标星哦~

一键三连「分享」、「点赞」和「在看」

科技前沿进展日日相见 ~

其他相关

中老年人剪什么样的发型可以显得更年轻一些

作者: 天天见闻 时间:2024-03-27 阅读: 15
不烫不染的情况下,尽量把发型的款式剪得个性一些、时尚一些,也可以减淡年龄感,带来年轻又有活力的感觉。以上这9款发型,非常适合中老年女性,不用烫发,只需把发型剪得时尚一些,再配合漂亮的发色,就可以带来减龄的效果。...
腹泻特效穴 牙痛的特效疗法

腹泻特效穴 牙痛的特效疗法

作者: 天天见闻 时间:2024-03-21 阅读: 14
Re:一个治疗腹泻特效新穴Re:一个治疗腹泻特效新穴主治:牙痛、面部麻痹说明:此二穴除治上述症外,治疗偏头痛、三叉神经痛,尤为特效,治疗手腕扭伤疼痛,效果亦佳。...

艳而不俗,他把小写意画出了工笔的效果,清新淡雅,极其舒心!

作者: 天天见闻 时间:2024-03-19 阅读: 18
工画,尤善花卉,勾勒写生,皴染赋色,出入恽寿平、沈铨而尤近程瑶笙。洪庶安的写意多是小写意,而且不同于中晚明以来的那种浅绛或水墨的写意画,他常常赋以浓艳的色彩。难能可贵的是,他设色浓而不俗,画面隽逸清丽,愣是把小写意画出了工笔的效果。...

【PS教程】01. 界面介绍与基本操作(打开/新建/修改/保存图像)

作者: 天天见闻 时间:2024-03-16 阅读: 21
选项栏显示的内容由当前激活的工具来决定,如「图2」所示。用鼠标点击一下此处,还可看到更为详细的文件信息,如「图6」所示。软件打开后我们会看到「图15」这样的界面:当我们修改图像尺寸时,一般会选择在方框内手动输入尺寸。...

玉灵膏有用吗?适合什么人吃?玉灵膏效果怎么样?

作者: 天天见闻 时间:2024-03-14 阅读: 8
玉灵膏有用吗?适合什么人吃?玉灵膏起源玉灵膏有用吗?我们可以看看玉灵膏的主要功效是什么?玉灵膏适合什么人吃?玉灵膏效果怎么样?什么样的玉灵膏效果好呢?...

面部神经阻滞麻醉【点位图】

作者: 天天见闻 时间:2024-03-12 阅读: 24
神经阻滞麻醉是将局部麻醉药注射到神经干或其主要分支附近,以阻滞神经末梢传入或传出冲动,使神经分布区域产生麻醉效果。头颈部神经阻滞麻醉较常用的有面部神经阻滞麻醉和颈从神经阻滞麻醉。前额部眶上神经和滑车上神经阻滞麻醉要点如下:...
我来说两句

年度爆文