我真傻,真的。
我早知道最近 AI 绘画很很厉害。
但是没想到现在已经被调教的和真人越来越像了。
更没想到画图创作的工具除了我们常说的显卡。
就连手边的 iPhone 都可以 “ 一键出图 ” ?
没错,小辣椒我看这个最近火爆的 AI 作画是非常眼馋。。。
但是咱这电脑又没有隔壁托尼的好,别说什么 4090 和 3070 了,甚至连张 20 系的显卡都没有。。。
看看他天天炫耀跑出来的效果 ▼
我只能看着手里的核显头疼,开始无效率的望梅止渴。
——直到我在 iPhone 上找到了这个软件。
不需要额外的显卡硬件,不需要联网,可以直接调用苹果的 A 系列芯片来本地的 AI 图片生成。
我 TM 画爆!
说下就下,软件本身不大,但是打开后需要我们下载大约 2G 左右的模型包。
这些不同种类的模型包,很大程度决定了我们生成出来的图片画风。
别看这软件界面有些朴素,但是电脑端常用的功能也都给安排上了,甚至还对手机端做了一些优化。
刚打开这个 App ,就会给咱们生成一堆提示词,可以直接点击屏幕靠右的 Generate 来生成一张 “ 样板 ” 照片,大约会消耗一分钟的时间。
对 TAG 里的词不满意也可以自己随意修改,也能用简单的话语描述来生成图像。
拖动这个 tag 框往右滑动,就可以输入负面 tag ,增加你不希望这张图里出现的元素。
最右上角的 512x512 可以调整图片的分辨率,在电脑上咱可以直接手动输入想要的分辨率。
而手机上输入就比较麻烦了,为了方便我们操作,它给了很多常用的分辨率选项。
毕竟太奇怪的比例,一般也不会有人去生成的吧。。。
在右边的 “ 更多 ” 里面,还可以进行更加专业的设置,比如图片的生成步数,关键词的联想次数等等。。。
还可以调整生成图片的模型,咱们可以理解为调节生成这张图的 “ 画风 ” 是什么。。。
比如这个 Waifu Diffuison 就比较擅长动漫画风。
如果有功夫折腾的话,说不定还能换个最近比较流行的 ChilloutMix 上去玩玩,整点 “ 真人 ” 混搭 “ 二次元 ” 的最新画风。
ChilloutMix 部分生成图片展示 ▼
而且下面的编辑栏还支持简单的涂抹和重新生成图片内容,虽然偶尔因为精度不够而抽风。。。
属于是简单易用好上手,总算是给没显卡的小辣椒过了一把 AI 作图的瘾了。
在玩了一段时间后,小辣椒还去研究了一下这个 App 是如何实现本地运算的。
没想到的是,开发人员能把 Stable diffusion 给移植到 iPhone 上跑,确实下了不少功夫。。。
中间的故事展开甚至可能都能单独写一篇文章,咱们长话短说介绍一下。
要知道刚刚被开源出来的 Stable diffusion 可是需要至少 10G 显存的显卡才能跑。
而今年最新的 iPhone 14 Pro Max 才刚刚够到 6GB 内存——而且还不是给一个 App 用的,是整个系统。
根据开发人员的说法,在 iOS 上一个 App 最多只能占用 2.8G 的空间,如果是 4G 内存的 iPhone ,一个 App 最多只能用 2GB 内存。
一分不能多,不然会直接被系统给杀死。
在经历了一系列的中间层优化和浮点数调整后,不知道开发人员掉了多少头发,这个 App 总算和咱们见面了。
不过这样体验下来,可能也是因为 iOS 上严格的限制,我发现手机上的作图虽然方便,但是专业性上和电脑的显卡相比还是有所差距。
这不是因为手机画不好,而是电脑上画的太好了。
最近几个月,AI 绘图的进步可以说是突飞猛进。
比如开头小辣椒给大家看的这种类似 cos 照片的 AI 图片,它就是通过一种叫 Lora 的小模型来训练出来的。
只需要上百张或者几十张照片,通过合理的训练参数,就可以做出一个人,或者是二次元角色的专属 AI 模型。
而且这种小模型 Lora 还可以和其它模型混用,来实现 “ 一个角色 ” , “ 百种画风 ” 的效果。
比如下面都是一个角色,但是各有各的画风 ▼
就连 AI 经常被人诟病的空间结构问题,也有了新的解决思路:
那就是用骨骼图摆 Pose 。
通过最新的 OpenPose 插件,可以指定 AI 生成的人物姿态。
甚至可能够解决AI 一直头疼的画手问题。
照这个进步速度,可能下周或者下下周,通过手分辨 AI 作图这个技巧就不存在了。。。
撰文:小陈 编辑:面线 封面:萱萱
图片、资料来源:
勘云工造 -weibo
https://liuliu.me/eyes/stretch-iphone-to-its-limit-a-2gib-model-that-can-draw-everything-in-your-pocket/
https : //bynss.com/apple/1019783.html
https: //arstechnica.com/information-technology/2022/11/stable-diffusion-in-your-pocket-draw-things-brings-ai-images-to-iphone/