看你的意思其实是想要训练某一个特定的人，也就是一个特定的形象。
这样的话完全不用训练stable-diffusion整个模型，而是可以通过一种名为LoRA的技术来实现。
LoRA简单理解就是对模型的某些层进行扩展，在它旁边建立一条新的分支，从原来的A->B-C，变成A->(B+B2)->C ,训练时仅需要训练B2即可。
因为不是对所有层都做这个操作，且B2也会做一些维度上的优化，LoRA这套方案的训练成本很低。我记得最低8G的显卡就能做了，时长也控制在1个小时到小半天左右吧， 反正很快的。
照片的数量可以参考一些形象类的LoRA的case，基本十几张到几十张足够了，风格可以多样，关键是如何对图像进行描述。网上有很多教程，可以参考下，大致思想就是，除了一些标志性的词语，比如这个形象的名字，其他就把想要修改的内容给写进去。比如你希望能够给她换发色，那就要在描述词中添加“黑发”这个词；但是你不希望让她的长发形象受损，那么就不要把“长发”这个词放到描述词中。
嗯，差不多就是这样了~
发布于 2023-07-07 10:09・IP 属地广东