快手开源的LivePortrait AI可以让静态图像动起来,精准模拟视频中的面部表情。
只需一张照片和一段视频,就能生成逼真的动画效果,适用于自拍照、艺术肖像和卡通图片等。
该AI可在本地部署,安装步骤相对简单,支持英伟达显卡加速。
不过目前还有一些局限性,如无法准确模拟说话时的口型。
效果视频预览:
原始图片
部分图片预览
视频教程在线观看
视频时间轴:
- 00:00 AI探索与发现中分享了一个有趣的AI,名为liveportrait,能让照片动起来,模拟面部动作,安装简单。推荐在本地部署,使用conda配置环境,安装依赖包,下载模型即可完成。
-liveportrait是一个能模拟面部动作的AI,支持自拍照、艺术肖像画等照片类型,特别擅长模拟嘴部和眼睛动作,栩栩如生。
-在本地电脑上部署liveportrait相对简单,推荐使用conda配置环境,克隆程序库、创建虚拟环境、安装依赖包、下载模型即可完成安装。
-安装步骤包括重启电脑、初始化conda、安装git工具,针对英伟达显卡用户可以安装cuda驱动,手动安装有利于后续功能更新和安全性。 - 02:19 建议使用11.8版本的PyTorch,因为官方推荐此版本,其他更高的CUDA版本可能无法成功加速。安装过程中,注意按步骤执行指令,中国大陆用户需科学上网,遇到下载失败提示可暂时忽略。
-安装CUDA驱动及PyTorch的步骤详解,建议按照视频下方的说明进行操作,中国大陆用户需提前科学上网。
-下载模型文件的注意事项,官方提供谷歌网盘和百度网盘链接,注意解压文件并粘贴到指定安装目录下。 - 04:36 生成卡通图片和肖像画的操作流程和注意事项。操作简单且效果出色,提供现成素材,调整眼睛和嘴巴大小生成表情包。最佳效果需要全部勾选选项,可手动修改配置文件。合成效果更好需使用正脸照片。
-liveportrait操作简单,生成卡通图片和肖像画效果出色,提供现成素材和生成表情包功能。
-最佳效果需要全部勾选选项,手动修改配置文件可实现更多选项设置。
-合成效果更好需使用正脸照片,侧脸照片可能影响合成效果。 - 06:53 AI面部合成技术需要注意角度、视频处理和镜头固定。处理视频前裁剪为1:1比例,固定镜头避免变形。局限性包括角度过大效果不佳和无法模拟口型,未来或开放更多功能。
-视频处理技巧,裁剪和调整大小对合成效果的影响。推荐使用剪映或CapCut等软件处理视频。
-AI合成技术的局限性,镜头固定和口型模拟的挑战。官方提供的固定镜头样本可作为参考。
文字教学
一、本地部署 项目地址:https://github.com/KwaiVGI/LivePortrait
1、安装miniconda https://docs.anaconda.com/miniconda/m…
2、安装好以后重启电脑,搜索j里输入cmd打开命令窗口,输入指令初始化 conda init –all
3、安装git工具,访问git官网,下载安装包,默认安装即可 https://git-scm.com/downloads
4、安装CUDA11.8(仅英伟达显卡需要安装,集显、A卡可跳过这一步) 下载安装包,默认安装即可 https://developer.nvidia.com/cuda-11-…
5、到准备安装LivePortrait目录,地址栏输入cmd打开命令窗口,依次执行以下指令
(1)git clone https://github.com/KwaiVGI/LivePortrait
(2) cd LivePortrait
(3) conda create -n LivePortrait python==3.9.18
(4) conda activate LivePortrait
(5) pip install -r requirements.txt
6、下载模型文件 Google Drive https://drive.google.com/drive/folder… Baidu Drive https://pan.baidu.com/s/1MGctWmNla_vZ…
解压后拷贝insightface、liveportrait两个文件夹 粘贴到LivePortrait安装目录下的pretrained_weights文件夹下
二、本地运行 建一个文本文件,把以下内容粘贴进去,保存后更改文件名为run.bat,双击run.bat即可运行。
@echo off
CALL conda activate liveportrait
python app.py –server-name 127.0.0.1 –server-port 8890 –no-share
运行前要关闭本地VPN工具,成功启动后可以开启
原视频教学出处: https://www.youtube.com/watch?v=BgPbcVP7NI0
精品AI网站提示:
如果你不想自己在本地部署, 可以尝试使用在线LivePortrait表情生成网站, 目前是免费的但有使用限制, 如果限制使用了可以切换代理IP的方式解决!
注意, 这个在线LivePortrait表情生成网站需要科学上网方式才能访问。
- 最新
- 最热
只看作者