换脸

本地

DeepFaceLab 高质量换脸

无论是云服务还是云算力效果或者性价比都不是很理想,分析原因为云服务价格高(colab,算力限额),云算力经常卡着不动,国内云算力质量可能较差、显卡老化等原因,最终购买3060主机尝试本地跑模型(效果待定)

  1. runpod,ubuntu系统,需要安装环境依赖,难度较高
  2. colab,免费版无可用GPU,CPU处理速度极慢,虽然是月订阅版,但是付费版有算力限制
利用Colab Pro + DeepFaceLab的方案,
AI prompt:

我想利用Colab Pro + DeepFaceLab来提取视频源里的人脸应用到目标视频里,帮我写一下详细过程,要尽可能的详细,同时我有一个XSeg的遮罩模型,也一并利用上。我是一个新手,过程要尽可能做到详细

脸部源素材生成:

通过chatgpt生成脸部以及多角度素材,然后通过Draw things进行真实性提升

生成的脸部多角度图片效果一般,会使脸部样貌有一定变化(待优化)

在线服务

1.DeepSwap:

链接:https://www.deepswap.ai

2.DeepFaceSwap:

链接: https://deepfaceswap.ai

3.faceswapper:

链接:https://faceswapper.ai

效果:效果尚可,有字幕遮挡的时候会造成替换效果下降

变声

https://elevenlabs.io/app/speech-synthesis/speech-to-speech

能改变声音,但是会去除环境音,比如缝合以及敲打的声音

———

Ultimate Vocal Remover

分离人声以及环境音