分享
第十二期 表情转移术LivePortrait
输入“/”快速插入内容
🎨
第十二期 表情转移术LivePortrait
用户8970
用户8970
用户9940
用户9940
用户6515
用户6515
2024年8月1日修改
活动主题
静态肖像生成动态视频, 🙂 笑容不会消失, 只会转移
教程
1.
在 comfyui里使用工作流,模型
https://pan.baidu.com/s/1Fk-GTXLmM0Ofynz04NfCaQ?pwd=cycy
2.
安装包解压即用 链接:
https://pan.baidu.com/s/1fh9vvLk8OHuIlCJxD7jiBg?pwd=282n
提取码:282n
LivePortrait:通过一张静态肖像生成动态视频
LivePortrait可以精确控制眼睛和嘴唇的动作,还能无缝拼接多个肖像,将不同人物特征合并成一个视频,确保过渡自然流畅。因为使用了一种不同于主流扩散方法的
隐式关键点框架
。该框架在计算效率和可控性之间取得了有效的平衡。LivePortrait生成的动画质量优于现有的非扩散和扩散模型方法。在RTX 4090 GPU上,生成速度为每帧12.8毫秒,效率显著高于现有的扩散模型。
静态肖像变得生动的视频生成技术,控制非常精准。
这项技术对AI视频生成中的人物表演和数字人具有很大帮助。
支持各种风格的图片,常见的动物面部迁移,并可以微调面部运动幅度
项目地址
https://github.com/KwaiVGI/LivePortrait
节点地址
https://github.com/kijai/ComfyUI-LivePortraitKJ
准备工作
安装节点
LivePortraitKJ
comfyui管理器->节点管理->搜索
LivePortraitKJ
拖入工作流, 第一次运行会自动下载的模型(需要网络环境), 没有自动下载可以看下面的liveportrait和insightface.
liveportrait需要的模型文件
网络环境不好, 模型放在网盘里面了, 下载完后,放入 ComfyUI/models/liveportrait 文件夹目录下, 如果没有就新建一个.
原模型文件地址
https://huggingface.co/Kijai/LivePortrait_safetensors/tree/main
网盘地址 链接:
https://pan.baidu.com/s/1Fk-GTXLmM0Ofynz04NfCaQ?pwd=cycy