石田琴子 发表于 2023-2-2 02:49

[novelai]一切二次元都将被三次元绳之以法!多图!

本帖最后由 石田琴子 于 2023-5-7 19:17 编辑

想了想,还是混这里时间长,发点东西聊一聊最近跑图成果有兴趣的朋友往下看全,效果会越来越好

因为换电脑,疫情物流等等原因,楼主12月才拿到新电脑,从960换到了3070ti
于是开始跑sd模型

开始网上搜索大模型,偶然发现了一个网红脸训练的模型……就开始尝试了起来
试验发现
当动漫人物画风接近真人比例时,有一定几率可以将动漫老婆们转成三次元
所以先用二次元和sd的混合模型转换二次元图片,使其比例接近真人
但是动漫人物普遍大头娃娃,想要协调就必须使用萝莉,小女孩等标签
而且为了加固转换几率,有时还要加上cosplay标签,这样人物在生成黑发和金发以外,会变成质感很差的假头套



随即又过了几天,basil模型她她她来了!!!
我猜想这位模型大佬电脑一定是存了海量fbi捕获器
而且他干了一件造福二次元的事儿,就是整个模型里一丁点tmd二次元内容也没有……
这直接导致了你扔进去的二次元图片只要不是毕老师画的,她一定给你转成三次元图片
然而这模型里的成女也有点网红脸,大眼袋,什么纯欲兔唇的玩意,反复测试后发现
自己以前跑的一些二次元老画师的小模型竟然可以起到三次元修脸的效果
于是日子又快乐了起来








快乐几天后,身为贤者的我又开始了思考……
上面都是通过二次元图片转换生成的,转换的幅度我会调的很高,不然还是会面临人物比例问题,就比如三爷的竹竿胳膊
AI面对如今身上零七八碎越来越多的手游角色,幅度一高,衣服等就会变得似是而非

尝试了下用之前训练的人物模型直接跑,嗯



作为一个op,我告诉你这是……神里绫华,基本上只带过来了单马尾、刘海、蓝发这三个点
挠头
说起来最近玩ai绘画的都在说什么lora模型很还原人物……?
下载,训练,试验












wow,成了~~甚至无需转换,文字生成图片,还给某位网友做了几张掀起刘海的凌华
一切二次元终将被三次元绳之以法!

最后,这两天在尝试一图多人,分别指定角色,也就是让图中的几个人特征不会融合
目前只能说稍有效果,虽然偶尔也会出现些有趣的图
比如这张干隆小裙儿




基本上双人特征符合的图,抽奖率可以在25%了
下面可以看看单人图和双人图效果









目前就分享到这里了
有人看的话,以后再更新跑动漫真人图经验

你的下一个二次元烧鸡,又何必是二次元





石田琴子 发表于 2023-2-2 02:53

这里说一句,自己跑的第一个模型是已故画师堀部秀郎先生的画风模型
从生成比例接近真人的二次元图片,到给三次元人物修脸,没想到帮我渡过了很多难关,如果没这个emb,恐怕我就不会在izumi大模型里碰出二次元转真人的第一步!
感谢堀部秀郎老师!

OedoSoldier 发表于 2023-2-2 02:54

石田琴子 发表于 2023-2-2 02:56

本帖最后由 石田琴子 于 2023-2-12 02:39 编辑

继续愉快的跑模型


石田琴子 发表于 2023-2-2 03:00

本帖最后由 石田琴子 于 2023-2-2 03:03 编辑

OedoSoldier 发表于 2023-2-2 02:54
ai生成的真人风格照片总有种恐怖谷的感觉,还是掺入些绘画风格比较好
我显存8G
实际上你看那张失败的礼服凌华,是我尽力跑高分辨率做的,单给别人看是看不出画的
重画幅度越高,分辨率越高,就越接近真人

而目前lora文生图动漫人物解决了重画幅度的问题,拉多高都不担心人物细节丢失
唯一的问题是分辨率,这个就需要上4090了,而且显存高了以后训练也可以跑大尺寸图片了

石田琴子 发表于 2023-2-2 03:05

本帖最后由 石田琴子 于 2023-2-2 03:36 编辑

疯狂拉高分辨率的话,人物比例会更接近真人
皮肤的质感也会越高,另外反向tag,脸部emb等一起上,至少我是不会有恐怖谷的感觉……
动漫人物因为我显存只能跑512的素材,所以分辨率太高了又会丢细节


而有时,仅仅是调整打光,也会影响真实度以及五官
下面两组小忍,第二组就用了更真实的光线描述,画面清晰后
下巴也明显凸了起来,可能越不真实越好看吧……



女神アイギス 发表于 2023-2-2 07:17

750只能眼馋,3070ti也超预算了,先马克一下过过干瘾

五块小民 发表于 2023-2-2 09:02

不错,楼主能不能分享一下用的promt呢

苏小幼 发表于 2023-2-2 09:09

谢谢楼主,太fbi了

石田琴子 发表于 2023-2-2 09:11

本帖最后由 石田琴子 于 2023-2-2 09:13 编辑

五块小民 发表于 2023-2-2 09:02
不错,楼主能不能分享一下用的promt呢
大部分没用promt,都是自己跑的emb和lora小模型……我到现在除了2,30个常用的服装和身体关键词,就没看过元素法典那些 orz

包括我在炼原神的lora时,我就认为凌华模型是最成功的
因为我可以不输入任何promt准确跑出三次元凌华,相反甘雨胡桃的lora我就要输入一堆服装发色的东西

而且三次元的五官,身材,比二次元的要玄学太多了……正向词我虽然不怎么打
但是上面几乎每张图的反向,模型权重,幅度,采样数值都得单独试……包括先拿到融合模型里把人物比例跑正常啥的………比如今天一晚上就在干一件事,如何让胡桃和甘雨先在二次元里把脸跑小,再丢给basil……

梅斯之围 发表于 2023-2-2 09:46

大脑袋看着有点出戏

石田琴子 发表于 2023-2-2 09:50

梅斯之围 发表于 2023-2-2 09:46
大脑袋看着有点出戏

有一些图做的早,头会大一些,新图我在逐渐优化这个问题

石田琴子 发表于 2023-2-2 09:55

本帖最后由 石田琴子 于 2023-5-7 19:17 编辑

这里聊聊大头的问题

图一是贴吧有人发的自己画的图,我如果直接放到模型里跑,出来就是图二的效果,大圆脸



这时先丢到二次元模型里,挑一些比例好的画师风格,跑一下,然后再丢回三次元



效果就好很多了
此外,出图的时候,拿胡桃为例,主楼里的胡桃有一张明显脸很瘦,就是我今天的成果
我是先在二次元模型里,把萝莉小女孩这类的词丢到反向,疯狂拉高成熟女性的权重
虽然因为有人物模型在,堂主并不会变成熟女,但是仔细看身材比例会有细微变化,不光是脸小了,身高也拉长了
此时再丢回三次元模型里跑就OK了

老柴斯基 发表于 2023-2-2 10:16

如果现实里的钟俢鹤琴cos是这样那可太棒了,没有堕入狂造眼线美瞳嘴唇抹腻子的魔道

-- 来自 能手机投票的 Stage1官方 iOS客户端

黑上シグマ 发表于 2023-2-2 10:17

嗯……对我来说完全不行,还是只能接受纸片人

----发送自 STAGE1 App for Android.

ac死或生 发表于 2023-2-2 10:39

褪色的雪花 发表于 2023-2-2 11:07

感觉有点恐怖谷

—— 来自 Xiaomi Mi9 Pro 5G, Android 11上的 S1Next-鹅版 v2.5.2-play

ulir 发表于 2023-2-2 11:39

部分图感觉像在看那种重装甲福利姬

----发送自 Xiaomi Redmi Note 8 Pro,Android 10

Chw6951 发表于 2023-2-2 12:06

本帖最后由 Chw6951 于 2023-2-2 12:09 编辑

这大概就是日本游戏角色画风?跟欧美游戏比脸更幼皮肤更光滑,介于二三次元之间的感觉,确实更符合宅宅的审美

KENN 发表于 2023-2-2 12:08

跟p过头的cos差不多

Sliurus 发表于 2023-2-2 12:19

看来无论是纸片人还是三次元,手指都是AI的的一道大坎,换成三次元画风甚至更恐怖了

废寝暴食 发表于 2023-2-2 13:04

好屌,最近开始感觉三次元的AI图多了
其实挺好,毕竟我通吃
就是跑三次元的图需要萝莉标签,这也太艹了
捏coser类的图,需要这么复杂的转换和训练

要是不捏coser,目标成品本身就是三次元妹子的话
是不是直接喂三次元的图就好了?

zerona 发表于 2023-2-2 13:14

本帖最后由 zerona 于 2023-2-2 13:15 编辑

只要没有手!不过现在ai做图确实比之前刚开始炼图的时候强多了。对了,是不是可以用一些注释来设定动作让手部的模型保持在不可视的位置来规避不合理的色块出现?

沧兰殇 发表于 2023-2-2 13:22

https://p.sda1.dev/9/4210c877d030d1774b111496ad8af5cb/CMP_20230202132101457.jpghttps://p.sda1.dev/9/612e76c37b6ababa35d4e38386370017/CMP_20230202132101524.jpghttps://p.sda1.dev/9/e372a9473b8bea235b8186ec194fa0fa/CMP_20230202132101593.jpghttps://p.sda1.dev/9/b48f5c7234ba41e5afa12559dd129a71/CMP_20230202132101640.jpghttps://p.sda1.dev/9/f877f5174353bf2b02a78993ba47aa8d/CMP_20230202132101684.jpghttps://p.sda1.dev/9/b00350a7bbd6f8e394b6ff24eab0e036/CMP_20230202132146701.jpg

石田琴子 发表于 2023-2-2 13:28

本帖最后由 石田琴子 于 2023-2-2 14:45 编辑

zerona 发表于 2023-2-2 13:14
只要没有手!不过现在ai做图确实比之前刚开始炼图的时候强多了。对了,是不是可以用一些注释来设定动作让手 ...
常规两种,一种不可视
还有一种让手自然伸展开,清晰的展示手指轮廓另外有个误区,很多时候手画不好单纯是因为占图比太低,分辨率太小
其实光是拉大出图分辨率手就能好很多

石田琴子 发表于 2023-2-2 13:31

废寝暴食 发表于 2023-2-2 13:04
好屌,最近开始感觉三次元的AI图多了
其实挺好,毕竟我通吃
就是跑三次元的图需要萝莉标签,这也太艹了

3次元模型你就输个1girl就随便出妹子啊……比如6楼的蓝发妹子
我捏萝莉是为了二次元转换的时候更符合比例以及增加五官可爱程度
24楼这个就是直出的

石田琴子 发表于 2023-2-2 13:33

沧兰殇 发表于 2023-2-2 13:22


我在b站已经把那什么国风2.5D屏蔽了……我转二次元就是为了躲避三次元的油腻感和妖艳**…………

石田琴子 发表于 2023-2-2 14:43

本帖最后由 石田琴子 于 2023-5-7 19:18 编辑

KENN 发表于 2023-2-2 12:08
跟p过头的cos差不多
做这个的初衷就是不喜欢现在的cos风格

有点良心吧
谁说我这个和重P的cos一样我跟谁急……

处男鉴黄师 发表于 2023-2-2 15:54

澹台高天 发表于 2023-2-2 17:44

basil的nsfw内容属实不太行,尤其是猫咪近景,鬼图率太高了

石田琴子 发表于 2023-2-3 01:41

处男鉴黄师 发表于 2023-2-2 15:54
以前使用那种把3次元2次元模型混合在一起的有机会直接出这种2.5次元图片,但不稳定。现在lora流行了可以更 ...

其实不太认为这叫什么2.5d,毕竟真人素材,tag调好是没有cg感的……

zx2kks 发表于 2023-2-3 02:12

什么极品COS照,真人弱爆了,这里面每一张脸和身材放现实都是大明星

RinQ0326 发表于 2023-2-3 09:38

确实很像重度ps的福利机啊

石田琴子 发表于 2023-2-3 10:49

RinQ0326 发表于 2023-2-3 09:38
确实很像重度ps的福利机啊

除你二籍……


处男鉴黄师 发表于 2023-2-3 11:03

石田琴子 发表于 2023-2-3 11:19

处男鉴黄师 发表于 2023-2-3 11:03
cosplay本身就是在3次元世界模拟2次元角色啊

所以2.5维是啥

处男鉴黄师 发表于 2023-2-3 11:30

七七見奈波 发表于 2023-2-3 11:31

真不错就是绫波丽的那个气质差得有点远,比较像不合适的cosplay,有点可惜

月珊瑚与紫鸢尾 发表于 2023-2-3 23:39

石田琴子 发表于 2023-2-3 11:19
所以2.5维是啥

手办

qds 发表于 2023-2-4 00:34

原看的够多了,能来点碧蓝档案吗
页: [1] 2
查看完整版本: [novelai]一切二次元都将被三次元绳之以法!多图!