美颜换脸磕CP全安排，腾讯大气公开FaceID大模型，我花了一下午配好insightface
原创 一非的科技钱包 青青看科技 2024-01-27 08:01 发表于广东
震撼来袭！腾讯近日推出了一款革新性的脸部一致性神器——IP Adapter-FaceID，誓要让AI绘图和摄影圈的朋友们告别角色变换难题。
然而，在我满怀期待地踏上探索之旅时，竟遭遇了三个令人意想不到的大坑，今天就来一起揭秘这场“换脸奇遇记”！
太难了，玩这种神器。
第一大坑，InsightFace安装难如登天。
第二大坑，工作流程命名宛如迷宫。
!***第三大坑，大模型型号匹配问题犹如拦路虎。
尽管路途坎坷，但当我最终跨越这些障碍，成功启动IP Adapter-FaceID后，其效果瞬间治愈了我的心伤。它利用FaceID embedding和LoRA技术，仅凭文本提示就能生成高度一致且风格多样的面部图像，堪称教科书级别的换脸模版！
尽管配置不易，但IP Adapter-FaceID所带来的革命性改变绝对值得我们去挑战和深挖！
家人们，我在此手把手分享这段血泪史，希望你们在挑战全网最前沿技术的同时，也能避免重蹈我的覆辙。
第一关，InsightFace究竟有多难
玩转转腾讯IP Adapter的第一道谜题：
如何搞定那教科书般重要的InsightFace安装？
此篇堪称小白必看、宝藏级教程，手把手带你走出困境！
我已顺利通关ComfyUI安装（这个我们暂且按下不表），然而当我满心期待地从网上导入WorkFlow时，却发现缺失的关键模块InsightFace犹如隐藏的高级感密码，一点就死。
完全安装不上啊。
问了几次GPT4也不得其解。
然而，真相总是藏在细节里。一番挣扎后，使劲想+查网络，我才发现原来ComfyUI内部搭载了一个独立的内嵌Python环境，与系统默认的版本并不兼容。
系统的是python 3.11.7，我的是3.11.6。
安装了几次都自动定位到系统目录里去了，咱的InsightFace都装到系统默认目录了，而ComfyUI还是个0。
所以要想成功安装InsightFace，必须深入embed目录，施展更深层次的命令才行。
所以，最后采用了这么两招，
1、到线上下载 insightface-0.7.3-cp310-cp310-win_amd64.whl 和 insightface-0.7.3-cp311-cp311-win_amd64.whl这两个安装包到相应的目录。
执行embody中的python.exe pip 来进行部署，然后查看版本，终于安装上了。
python_embededpython.exe pip install insightface-0.7.3-cp311-cp311-win_amd64.whl
InsightFace终于被驯服。但这仅仅是这场配置马拉松的第一站，接下来还有更多挑战等待攻克。
寻找大模型名字
不过还好，除了insightFace之外大部分的问题都可以在网上搜索到答案，无非就是缺个包，手动部署一下，ComfyUI也很强，大部分的节点都可以自动安装。
不过，我从网上找到的几个大模型，到底怎么用总是对不齐，结果遇到了各种障碍，大部分是size 不匹配。
比如这个，是大模型和IP Adapater的模型分辨率没对齐。
另外，CLIP和Adapter没对齐也会报错。
把各个模型的名字和作用搞清楚花了我一下午的时间，现在给大家做一个介绍。
上图是关键的6个配置：
1、配置Adapter IP 文件，主要有两种类型SD15，以及XSDL，类型比较多，用于对脸部进行采样。放在models/IPAdapater下。
2、Clip模型，这个是训练大模型，一般都有几个G，用于对采样的模型进行训练，如果两者间的精度不匹配，就容易造成Mult Size 不能合成。
放在models/Clip_Vision下
3、随便填，好像目前Adapater支持CPU，就填CPU吧。
4、处理大模型，这个可以到lib网站上下载一个国产的喜闻乐见的训练后的大模型，我找了个帅哥美女模型。哈哈。
放在modles/CheckPoint下
5、Lora模型，目前好像IPAdapater和Lora的版本合成比较好，所以CheckPoint要和Lora融一下，放在 modelslorasipadapter 下
6、Sample 模块，多个模型进行总融合，之前我由于没有把checkpoint 进行lora转化，在这一块经常死，现在终于过了。
7、没啥了，直接收图，美美达。
为了方便大家不再踩我的坑，我把自己用过的这些模型都标好目录和种类，统一放在一起，文末会告诉大家在哪儿取，哈哈。
划重点啦！配置好iPadapter有什么意义
IPadapter配置好了，通过前面3步，相当于你就是有了一张数字护照，或者说，数字复制人。
在这个基础上，使用图文绘画，或者换脸，或者换装，可以灵活地采用各种已经训练好的大模型。
比如说我，虽然形象不怎么样，通过帅哥美女过滤了之后，竟然感觉也还可以了。
好象年轻了好多岁，哈哈。
这可比之前的PhotoMaker随机搭配要强多了，这个身份生成了，你随时都可以想生成多少生成多少，各种服装，各地乱跑。
而且还有更闪眼的玩法：
比如喜欢磕CP的，修改一下CompyUI的节点，将之改成两人融合的模型，最近最流行的那个啥董老师，和啥长公主，你喜欢配就配一下，看看效果怎么样。
我这里不敢配，原因你懂的，不过你自个儿娱乐，就随意了。
另外呢，你还可以轻松地换成动漫模型，二次元模型，甚至可以指名一个原神的人物，化身为他，轻松融合完全没有死角。
总之，Face ID 的玩法很多，只要你有心，就必须有新花样。
尽管腾讯IP Adapter FaceID配置之旅充满了未知和悬念，但只要跟随我的实战经验，一步步解锁这些技术难关，你也能轻松驾驭这款神器，实现“有手就能做”的目标。
毕竟腾讯可是以人脸识别著称的喔，哈哈。
另外，为了方便大家取用，我把这个项目的网址，大模型的网址，以及我自己手工验证过的模型都放在公众号里。
现在只要你关注咱们公众号，在消息窗回一个：“Face”，就能得到全部资料和指引。
你还等什么呢？我可是花了一天的时间搞定这把功略啊！
所以，家人们，准备好跟我一起冲吧，面对配置难题，我绝不允许你们掉队，让我们携手解开每一个隐藏的谜团，共同攀登AI世界的技术高峰，感受那份治愈的成功喜悦！
不看的原因
确定
内容质量低
不看此公众号
相关知识
3分钟教你一键精准换脸，切勿违法犯罪！
“心意cp ”
#花融CP[超话]#...
磕cp专用号的推荐
自配美颜减肥花茶制作教程
君子兰换盆有哪些步骤？如何给君子兰换盆？
照片美颜
深扒大模型价格战：15家45款模型比拼，谁真便宜谁“打幌子”？
各位刘亦菲最近又忙着磕哪对CP呢？
发型就换这 3 款，时髦开运还显脸小！
网址: 美颜换脸磕CP全安排，腾讯大气公开FaceID大模型，我花了一下午配好insightface https://m.huajiangbk.com/newsview1787499.html
| 上一篇: 白蒿的养殖方法和注意事项（白蒿的 |
下一篇: 重磅升级！iPhone16系列引 |
