A concept Lora aim to generate blank eyes girl and without too much interfering the style of the base model.
It appears that it can stably generate blank eyes without highres fix when generating portrait/close shot pictures.
But still, it is strongly recommended to enable highres fix, especially if you wanna generate full body images or images with detailed background, it can significantly improve the quality of blank eyes generation.
Works the best with anime styled base model, like NovelAI, Counterfeit, Anything series (which I used for testing), etc.
Lora trained on 272 images of blank eyes girls and used NovelAI as base model.
Recommand weight: 1. Trigger word: hypnoLora, empty eyes
Please feel free to leave a comment below :)
=============================================================================
概念类Lora,可以较稳定生成催眠,或者说“虚ろ目”、“blank eyes”类型的角色,而不会太多影响底模画风
在生成半身像、近景的时候效果最好,无需开启高清修复即可获得良好的blank eyes结果。
但依然强烈推荐开启高清修复,特别是在需要生成全身照/细节较丰富的背景的时候,可以极大提升眼睛生成的成功率。
最好使用NovelAI、Counterfeit、Anything之类偏动漫风的底模,半写实的底模效果也还行,但显然不如动漫风底模显著。
试了很多个版本,前前后后差不多一个多月。最终训练集有272张图片,底模是NovelAI的latest版本,用了85张blank eyes的脸部图片做正则化,取的15个epoch中的第12个作为最终版本,训练集重复次数为1
推荐权重:1左右 触发词:hypnoLora, empty eyes
有任何问题欢迎留言:)

Description
FAQ
Comments (16)
what a good job! when do you try to train a lora of real?mc is good
You can train anything with proper dataset. But the problem is that MC itself is fictional, and can not be well displayed in real life :(
@Mineweeper are you Chinese?Could we have a talk in Wechat or.....you know....I am a mc fan too.Maybe I have some you will like.(^-^)/
@midcont 啊这....不是国人谁会在简介里附中文哇。不过微信就算了吧,现在civitai还没有私信功能
@Mineweeper 也是哈🙃其实我想的是训练lora没有效果的原因是不是没有素材,如果是虚瞳的素材的话,可以用hs2很容易弄出大量素材。我本来想着自己试试,但是电脑配置不是很够
@midcont 你用hs2或者恋活肯定可以很容易整出一堆训练集,但炼出来就全长恋活/hs2一个样了。就像我c站里另一个模型一样,全是找的同一个游戏里的cg。这种拟合效果会好,眼睛也肯定比我这个画的好且稳定(你试试就知道,我这个lora稍微把场景拉远一点,人一小,眼睛的效果就差远了)。但全使用类似训练集的缺点其一是容易过拟合,二是换啥模型都会只是同一种类似画风,大同小异。
我这个差不多是翻遍了全网所有能找的素材,每个画师最多取了两三张,然后重复只有1,才整出来一个。
这种功能类lora的训练你可以看看青龙的视频,www.bilibili.com/video/BV1oP411f7fi
@Mineweeper 先说下抱歉,因为我没怎么去关注过训练lora的视频,所以我以为的是用大量眼睛特写的照片就可以训练出真实的虚瞳。看了视频后知道这样估计只能在局部重绘发挥效果。
但是如果我把大量真实的照片眼睛细节进行ps,这样再去训练,会不会有好一些的效果?
另外再插一句,我知道一些mc的站点可能是你不知道的,这里不太方便讲,所以我才比较冒昧问你的联系方式☹️
@Mineweeper 先说下抱歉,因为我并没有关注过lora训练的视频,不太清楚一些细节。
看了你推荐的视频后,如果我提供一些ps后的真实虚瞳照片,这样训练的效果会不会好很多,之前我试过将ai的图放到ps里进行加工,并不复杂。
再插一句,其实我觉得我知道一些你可能不知道的资源比较齐全的mc站点,想和你分享一下,这才冒昧的问了你的联系方式。实在抱歉。
@midcont 用ps的改图,假如p的好那训练效果肯定是不错的,不过毕竟要训练集数量要大,那会非常花时间而且很看水平咯,我反正对画工一窍不通😂假如有需要联系交流什么的话直接推特上dm我吧,id和c站一样,虽然没怎么用过就看看○图
This is AMAZING - there's no style transfer or bleed at all, it's laser focuse don eyes.
How'd you do this? Is this a LORA or a LOHA?
what Dimensions did you train with?
how extensively did you caption the images?
training my own LORAs, advice helps. thx
①Its a lora trained using locon.
②Dim:8. Repeat:1. epoch:15
③Only used 2-3 images per illustrator (avoid AI to learn art style from a single illustrator), took me over a month to collect and optimize all 272 images. Use 85 head portrait for regulation.
Tagged using wd1.4 tagger, and excluded all tag related to hypnosis.
大佬,这几天用Lora突然变成<lora:hypnoLora8-000012:1>了,是更新了吗?
我没更新过,应该是lora的机制变了吧,原先c站上传模型的时候会根据标题自动重命名文件名,然后webui也是直接读文件名的。现在机制变了呗
pony version plss
