网站建设配置,网站程序开发要点,江苏省建设厅网站官网,个人简历网站模板下载文章目录 一、关于 TANGO演示视频#xff08;YouTube#xff09;#x1f4dd;发布计划 二、⚒️安装克隆存储库构建环境 三、#x1f680;训练和推理1、推理2、为自定义字符创建图形 一、关于 TANGO
TANGO 是 具有分层音频运动嵌入 和 扩散插值的共语音手势视频再现
由东… 文章目录 一、关于 TANGO演示视频YouTube发布计划 二、⚒️安装克隆存储库构建环境 三、训练和推理1、推理2、为自定义字符创建图形 一、关于 TANGO
TANGO 是 具有分层音频运动嵌入 和 扩散插值的共语音手势视频再现
由东京大学和 CyberAgent AI Lab 联合开发
github : https://github.com/CyberAgentAILab/TANGO官网https://pantomatrix.github.io/TANGO/huggingface 试用 https://huggingface.co/spaces/H-Liu1997/TANGOpaper : https://arxiv.org/abs/2410.04221YouTube : https://www.youtube.com/watch?v_DfsA11puBc 参考文章开源版HeygenTANGO数字人瞄准全身动作生成本地部署实测 https://mp.weixin.qq.com/s/3br-2dP2GmrhqqHY4cbpmg 演示视频YouTube
https://youtu.be/xuhD_-tMH1w?siTr6jHAhOR1fxWIjb 发布计划
AuMoClip和ACInterp的训练代码ACInterp的推理码处理YouTube商业视频数据非常小约15分钟创建手势图的脚本带有AuMoClip和预训练权重的推理码 二、⚒️安装 克隆存储库
git clone https://github.com/CyberAgentAILab/TANGO.git
cd TANGO
git clone https://github.com/justinjohn0306/Wav2Lip.git
git clone https://github.com/dajes/frame-interpolation-pytorch.git构建环境
我们推荐一个python版本3.9.20和cuda版本11.8。然后构建环境如下
# [Optional] Create a virtual env
conda create -n tango python3.9.20
conda activate tango
# Install with pip:
pip install -r ./pre-requirements.txt
pip install -r ./requirements.txt三、训练和推理 1、推理
这是在路径your root/TANGO/下运行推理脚本的命令生成两个8s vido大约需要3分钟。您可以通过直接检查视频或使用我们在EMAGE中的搅拌机插件通过搅拌机检查结果. npz文件来可视化。
第一次运行时将自动下载必要的检查点和预先计算的图表。请确保至少有35GB的磁盘空间可用。
python app.py2、为自定义字符创建图形
python create_graph.py2025-01-06一
