财之道 - 分享付费文章

写真自由!终于实现用lora换脸啦~MJ、SD以及lora的换脸教程整合版

生财有术 ·

写真自由!终于实现用lora换脸啦~MJ、SD以及lora的换脸教程整合版

萧川川川

2023-08-0711:07

写真自由!终于实现用lora换脸啦simmathbfMmathbfJ、SD以及lora的换脸教程整合版

MJ和SD的换脸我都用过,体验上是SD的局部重绘相似度会更高一点。但是从普通人做证件照的角度,还远远不够,我就直接给自己练了lora进行换脸,还蛮像的,感觉可以成为手动秒鸭相机了。

这里把用MJ、SD和lora炼丹换脸的教程全部整合到一起了,如果想看炼丹直接到第四部分。

强调一下,我是mac电脑,SD和炼丹都是在云端完成的,mac用户友好版。

一、图片准备

需要一张表情自然的正面照,可以参考下面吴彦祖、安妮的。如果是想要换自己的脸,可以根据这几条去拍摄:

1、正脸照,光线好

2、五官清晰

3、微笑(表情尽量和要换脸的照片保持一致)

4、可以在美图秀秀里稍微美颜一下,加强优化下眉毛、眼睛和皮肤(mj里是不改肤色的t_t)

二、MJ换脸教程(全文看飞书链接)https://njmseq3llu.feishu.cn/wiki/KxYyw0xQaiBtZKkQ...

三、SD换脸教程-roop插件

这里用的是sd中的roop插件换脸,我是mac电脑,所以只能用云端部署。但是查了
一下roop云端部署也比较费劲,我直接在镜像中选择了一个有roop插件的。选择的平台是autoDL:AutoDL算力云|弹性、好用、省钱。租GPU就上AutoDL流程:注册>>租用新实例>>选内蒙A区+A40(之前试过太低的配置,roop带不起来)>>选一个带roop的镜像>>创建成功>>跑python文件>>成功后打开SD

四、lora的安装与使用

因为头疼配置,直接选择青椒云,然后在选择朱尼酱大佬直接打包好的镜像。青椒云链接:云电脑_云桌面_云图形工作站_桌面云电脑服务平台-青椒云

1、素材准备

这里需要强调一下,训练集非常非常重要!这是模型的学习材料,直接关系你的lora能不能成功,泛化性好不好。

1)照片准备

a、20-30张;

b、高清晰度;

c、多角度(尽量不要重复)中景、近景、远景;上下左右,更多更充分、更丰富的数据;d、背景、妆容、服装尽量简单:我第一次用了出去玩的写真,练了4个多小时都没出来;

e、瑕疵处理:

有些比较明显的瑕疵且不想输入给模型的,比如肤色太暗、痘痘啥的可以微p。但是不要美颜过度,会影响模型效果。

2)tag打标

正确的、丰富的tag非常重要,把你的特征转成文字、数据并正确学习的重要一步!

可以按照这个模板进行打标:

主题(人物1boy1girl、触发词);

主要的人物特征(发色);

动作、视角、光影效果、其他。

另外,想要保留的特征就不要放到tag里,比如你希望发色永远不变,是你自带的一个特征,就不需要标注。
Tag检验:原tag生成图片的时候越像tag打得越好。

教程图比较多,为了阅读体验,还是看飞书文档吧https://njmseq3llu.feishu.cn/wiki/KxYyw0xQaiBtZKkQ...收起

Ai绘画生财技能

丁玲·Bettie、江海阔、小鱼、焦皮、不忘初心、花舞、亦仁、小鱼学长、Jerry学姐、晓风乾.等47人觉得很赞

萧川川川:萌新第一次发文,还请生财的老师、前辈们多多指导~

2023-08-0711:08小哈:太强了👍

2023-08-0711:23

#无标签