2023年7月31日
Roop: 实时换脸/直播换脸的实现和使用方法!
Roop能快速实现图片和视频换脸,那么可以做直播换脸么?
如果行,是不是会很嗨皮?!只要一张图片,不需要炼丹,直接就可以换脸直播了。
实际上,也确实可以。只是这个代码,还没有加入到软件之中。
下面就教大家如何来添加这个代码,自己动手丰衣足食。
只需要将下面代码,加入到ui.py文件之中即可。
这段代码其实很早就出现在github上了,但是考虑到各方面的问题,并没有并入主分支。
代码逻辑也不复杂,就是使用CV实时读取摄像头画面,然后把每一帧都实时换脸,然后把换脸后的结果实时显示在窗口上。
然后,在界面上添加一个按钮。实现点一下,就能打开,上面添加的窗口的效果。
添加完成之后,启动软件,就可以看到界面上多了一个“实时” 的按钮。
点击“选择人脸” 按钮,选择人脸,点击“实时” 按钮,等待一会儿,就会跳出一个单独的窗口。
通过这种方式,在RTX3060上,基本能看。就是说画面看起来基本是连贯流畅的。
但是这里还是有一个问题,默认情况下,画质比较差。
这个时候,如果你对你的显卡配置比较有信心,就可以尝试启用“人脸增强” 来实时增强你的人脸。
启用增强之后,清晰度拉满,本来脸部的缺陷也会被修复,但是会损失一定的相似度。
当跳出预览窗口之后,就可以通过窗口捕捉进行实时的直播了。或者用虚拟摄像头,就可以实现换脸聊天了。
你们说那个收费的Swapface有没有可能其实也是基于同样的技术原理呢?
Roop软件包V1.1.0可以通过公众号发送roop获取,获取后修改一下相应文件就可以咯。
知识星球的用户,可以在roop主题帖下面,直接获取全部改好打包好的软件。
以后,我修改过的部分都会发在星球里面。Roop主分支上更新的内容我会实时同步在公开的软件包里面。
明天再给大家讲一个DeepFaceLive上的更新!
所有评论
这也太吊了
pip uninstall onnxruntime onnxruntime-coreml
pip install onnxruntime-coreml==1.13.1
python run.py –execution-provider coreml
博主啥时候更新下A卡,看了眼项目应该是支持了Windows下A卡的DML
pip uninstall onnxruntime onnxruntime-directml
pip install onnxruntime-directml==1.15.1
python run.py –execution-provider dml
这个在3060上试了,效率很低。在一个古董A卡上4G显存跑不起来。
没A卡,没法测试。