写真自由!终于实现用lora换脸啦~MJ、SD以及lora的换脸教程整合版
生财有术 ·
写真自由!终于实现用lora换脸啦~MJ、SD以及lora的换脸教程整合版
萧川川川
2023-08-0711:07
写真自由!终于实现用lora换脸啦simmathbfMmathbfJ、SD以及lora的换脸教程整合版
MJ和SD的换脸我都用过,体验上是SD的局部重绘相似度会更高一点。但是从普通人做证件照的角度,还远远不够,我就直接给自己练了lora进行换脸,还蛮像的,感觉可以成为手动秒鸭相机了。
这里把用MJ、SD和lora炼丹换脸的教程全部整合到一起了,如果想看炼丹直接到第四部分。
强调一下,我是mac电脑,SD和炼丹都是在云端完成的,mac用户友好版。
一、图片准备
需要一张表情自然的正面照,可以参考下面吴彦祖、安妮的。如果是想要换自己的脸,可以根据这几条去拍摄:
1、正脸照,光线好
2、五官清晰
3、微笑(表情尽量和要换脸的照片保持一致)
4、可以在美图秀秀里稍微美颜一下,加强优化下眉毛、眼睛和皮肤(mj里是不改肤色的t_t)
二、MJ换脸教程(全文看飞书链接)https://njmseq3llu.feishu.cn/wiki/KxYyw0xQaiBtZKkQ...
三、SD换脸教程-roop插件
这里用的是sd中的roop插件换脸,我是mac电脑,所以只能用云端部署。但是查了
一下roop云端部署也比较费劲,我直接在镜像中选择了一个有roop插件的。选择的平台是autoDL:AutoDL算力云|弹性、好用、省钱。租GPU就上AutoDL流程:注册>>租用新实例>>选内蒙A区+A40(之前试过太低的配置,roop带不起来)>>选一个带roop的镜像>>创建成功>>跑python文件>>成功后打开SD
四、lora的安装与使用
因为头疼配置,直接选择青椒云,然后在选择朱尼酱大佬直接打包好的镜像。青椒云链接:云电脑_云桌面_云图形工作站_桌面云电脑服务平台-青椒云
1、素材准备
这里需要强调一下,训练集非常非常重要!这是模型的学习材料,直接关系你的lora能不能成功,泛化性好不好。
1)照片准备
a、20-30张;
b、高清晰度;
c、多角度(尽量不要重复)中景、近景、远景;上下左右,更多更充分、更丰富的数据;d、背景、妆容、服装尽量简单:我第一次用了出去玩的写真,练了4个多小时都没出来;
e、瑕疵处理:
有些比较明显的瑕疵且不想输入给模型的,比如肤色太暗、痘痘啥的可以微p。但是不要美颜过度,会影响模型效果。
2)tag打标
正确的、丰富的tag非常重要,把你的特征转成文字、数据并正确学习的重要一步!
可以按照这个模板进行打标:
主题(人物1boy1girl、触发词);
主要的人物特征(发色);
动作、视角、光影效果、其他。
另外,想要保留的特征就不要放到tag里,比如你希望发色永远不变,是你自带的一个特征,就不需要标注。
Tag检验:原tag生成图片的时候越像tag打得越好。
教程图比较多,为了阅读体验,还是看飞书文档吧https://njmseq3llu.feishu.cn/wiki/KxYyw0xQaiBtZKkQ...收起
Ai绘画生财技能
丁玲·Bettie、江海阔、小鱼、焦皮、不忘初心、花舞、亦仁、小鱼学长、Jerry学姐、晓风乾.等47人觉得很赞
萧川川川:萌新第一次发文,还请生财的老师、前辈们多多指导~
2023-08-0711:08小哈:太强了👍
2023-08-0711:23