明敏发自凹非寺量子位|公众号qbitai用ai画画

天天见闻 天天见闻 2023-04-30 科技 阅读: 133
摘要: AI都可以实时移交,还能控制通过提示词生成图像的内容和风格,“AI马上调整了作画方向,这就是最新点燃的AI实时作画项目。AI可以更大程度地帮助人类艺术家创作。然后,将每次落笔后的草图发送到Automatic 1111的API接口,并在图像生成方面使用了ControlNet的scribble模式细化效果。

明敏 发自 凹非寺

量子位 | 公众号 QbitAI

现在用AI画画,完整草图都不需要了。

每一笔落下,AI都会实时交上“新作业”

细节、颜色、画布空白,它都自动补全。

还能通过提示词来控制生成图像的内容和风格。

比如加一句“ 一个穿长外套的男人站在海边“,AI立马调整了作画方向:

最后成稿的作品如下,效果很奈斯。

怪不得网友表示,自己惊掉的下巴已经找不到了。

这就是最新火起来的AI实时作画项目,Reddit上的热度有 1.8万。

有人还表示,这回似乎说明了,相较于取代人类,AI可能更大程度上会帮助人类艺术家创作。

一个脚本搞定

如上效果是靠一个 Python脚本实现。

通过构建一个画布和一个图像生成框,然后把每次落笔后的草图发送给Automatic 1111的API接口,这样就能基于Stable Diffusion和ControlNet的能力作画了。

其中,Automatic 1111是一个基于Stable Diffusion的可便携部署的离线框架,封装了UI和一些功能,能通过可视化界面使用Stable Diffusion。

此外生成图像方面还使用了ControlNet的scribble模细化效果。

作者提醒说,想要让这个脚本能正常运行,一定要确保能调用Automatic 1111 webui的API,并且已经安装激活了ControlNet扩展。

可以通过修改payload.json文件来获取不同的prompt、seed和ControlNet模型。

在实时生成的速度上,作者表示现在看到的demo是他加速4倍后的结果,具体情况如何,恐怕还要看大家的显卡水平了。

所以不少网友看后的反应是:

实时?我的显卡说,你在做梦。

1080要再次哭晕了……

也大佬推算了各个型号显卡可能带来的效果:

我上次使用Automatic1111时,用3080能实现每秒12次迭代;对于预览图片来说,或许不需要这么多迭代。

所以如果用3080的话,大概可以每1-2秒得到一张图片预览(3060可能是3-4秒);如果用4080、4090,不到1秒就能出一张预览。

尽管硬件上还是有制约的……但这还是没影响大家的脑洞。

有人表示,这或许是未来很多艺术家搞创作的方式了。

还有人说,未来已来了。

你觉得呢?

GitHub地址:

— 完—

《中国AIGC算力产业全景报告》征集启动

AIGC算力需求爆发,谁将在此次算力产业变革中脱颖而出?

量子位《中国AIGC算力产业全景报告》和 《最值得关注的AIGC算力玩家》正式启动对外征集,期待有更多优秀的机构产品、案例与技术能够被大众看到。

点这里 ?关注我,记得标星哦~

一键三连「分享」、「点赞」和「在看」

科技前沿进展日日相见 ~

其他相关
初学要义

初学要义

作者: 天天见闻 时间:2024-06-01 阅读: 2
初学要义“理、法、术、功”初学要义理、法、术、功是传统拳术的四大组成部分,虽然不是全部内容,但却是主体。”拳论、拳谱虽好,初学之人“少”看为妙。传统拳术是一门“实修”的学问,初学之人重在踏实,小聪明与浮躁要不得。初学之人若无行家在身边指导把关,还是不练为妙。初学之人不可不知。...
手风琴怎样配和弦(十)

手风琴怎样配和弦(十)

作者: 天天见闻 时间:2024-05-25 阅读: 2
大调的副三和弦使用人们常常把大调经常用的和弦称为大调和弦,小调也同样,这没什么毛病。但是不等于大调不能用小三和弦,小调不能用大三和弦,事实是大调经常用小三和弦,而小调也有时用大三和弦。在歌曲中,往往有大小调式交替,那这时候,613和弦就担当起了主和弦重任。其次是246和弦。...
临帖做到这四点,效果就出来了

临帖做到这四点,效果就出来了

作者: 天天见闻 时间:2024-05-19 阅读: 1
临帖是学习书法的不二法门,在选定字帖后,如何提高临帖效果,是临帖中的核心问题。采用四步临帖法临帖,你会收到事半功倍的效果。观察得越仔细就越有利于临帖。“写”的目标是:争取凭记忆将范字“复制”出来。这样,既为临写下一个字做准备,又在比较中提高了自己的眼力。只有这样,才是有效地临帖。...
比揉腹效果大,比吃药更安全,一穴顶10穴,大小病都管!

比揉腹效果大,比吃药更安全,一穴顶10穴,大小病都管!

作者: 天天见闻 时间:2024-05-17 阅读: 2
比揉腹效果大,比吃药更安全,一穴顶10穴,真是又快又好,养肺,调脾胃,护心,大病小病它都管!大家看中府穴的位置正好和背部的天宗穴;是前后相呼应的,在我们中医治疗的原则里面,上病下治,前病后治的方法,都是前后上下的对应反射点取穴治疗,所以,有肩周炎的朋友,可以找中府穴这样配穴,效果好。...
科学有效的记忆方法

科学有效的记忆方法

作者: 天天见闻 时间:2024-05-03 阅读: 2
为了系统地掌握科学知识,必须进行有意记忆。利用联想来增强记忆效果的方法,叫做联想记忆法。用联想来增强记忆是一种很常用的方法。但是,利用上面提到的联想规律,就能够增进这种方法的记忆效果。这种方法在掌握各种语言文字的过程中效果显著。口诀记忆法就是符合组块规律的一种记忆方法。...
短视频素材哪里去找推荐几个视频素材免费下载的网站

短视频素材哪里去找推荐几个视频素材免费下载的网站

作者: 天天见闻 时间:2024-04-23 阅读: 2
专注于提供免费的高质量B-Roll视频素材。专注于提供免费的自然和户外视频素材。提供各种免费的循环视频素材。提供大量免费和Pro视频素材。缺点:虽然有免费选项,但一些高质量或4K素材需要Pro账户访问。提供各种高质量免费视频素材。优点:无需付费即可下载使用,适合多种视频制作需求。...
我来说两句

年度爆文