🎨
第十二期表情转移术LivePortrait

用户8970

用户9940

用户6515

2024年8月1日修改

活动主题

静态肖像生成动态视频, 🙂 笑容不会消失, 只会转移

教程

在 comfyui里使用工作流,模型 https://pan.baidu.com/s/1Fk-GTXLmM0Ofynz04NfCaQ?pwd=cycy

安装包解压即用链接：https://pan.baidu.com/s/1fh9vvLk8OHuIlCJxD7jiBg?pwd=282n

提取码：282n

common.docs_name - LarkCCM_Docs_Menu_Image

LivePortrait：通过一张静态肖像生成动态视频

LivePortrait可以精确控制眼睛和嘴唇的动作，还能无缝拼接多个肖像，将不同人物特征合并成一个视频，确保过渡自然流畅。因为使用了一种不同于主流扩散方法的隐式关键点框架。该框架在计算效率和可控性之间取得了有效的平衡。LivePortrait生成的动画质量优于现有的非扩散和扩散模型方法。在RTX 4090 GPU上，生成速度为每帧12.8毫秒，效率显著高于现有的扩散模型。​

静态肖像变得生动的视频生成技术，控制非常精准。

这项技术对AI视频生成中的人物表演和数字人具有很大帮助。​

支持各种风格的图片,常见的动物面部迁移,并可以微调面部运动幅度​

项目地址 https://github.com/KwaiVGI/LivePortrait

节点地址 https://github.com/kijai/ComfyUI-LivePortraitKJ

准备工作

安装节点LivePortraitKJ

comfyui管理器->节点管理->搜索LivePortraitKJ

拖入工作流, 第一次运行会自动下载的模型(需要网络环境), 没有自动下载可以看下面的liveportrait和insightface.​

liveportrait需要的模型文件

网络环境不好, 模型放在网盘里面了, 下载完后，放入 ComfyUI/models/liveportrait 文件夹目录下, 如果没有就新建一个.​

原模型文件地址 https://huggingface.co/Kijai/LivePortrait_safetensors/tree/main

网盘地址链接：https://pan.baidu.com/s/1Fk-GTXLmM0Ofynz04NfCaQ?pwd=cycy