ai语音嘴型同步

wav2lip

wav2lip,github,AI虚拟主播数字人嘴型同步模型

标签:ai语音嘴型同步wav2lip wav2lip 模型 wav2lip官网

wav2lip官网,github,AI虚拟主播数字人嘴型同步模型

简介

最近两年,数字人受到越来越多人的关注。数字人可分为3D和2D。3D的话比较出名的是虚幻引擎meta human,背后的技术涉及到blendshape等等。而本文将介绍两个比较知名的2D数字人算法,分别是SadTalker和Wav2Lip。另外,最近泰勒斯威夫特说中文的视频很火,据说背后用到的算法之一是GeneFace++,不过限于篇幅和它的前提知识比较多,本文暂时不讲。

wav2lip官网: https://github.com/Rudrabha/Wav2Lip

论文:

《A Lip Sync Expert Is All You Need for Speech to Lip Generation In the Wild

http://cdn.iiit.ac.in/cdn/cvit.iiit.ac.in/images/Projects/Speech-to-Lip/paper.pdf

wav2lip

2D数字人根据输入类型的不同,还可以进一步分为视频+音频,wav2lip和geneface属于这一类,这一类算法只生成新的口型,另一类的输入是图片+音频,sadtalker属于这一类,这一类不仅生成新的口型,还生成头部运动,复杂度较高。
Wav2Lip技术原理

数据评估

wav2lip浏览人数已经达到188,如你需要查询该站的相关权重信息,可以点击"5118数据""爱站数据""Chinaz数据"进入;以目前的网站数据参考,建议大家请以爱站数据为准,更多网站价值评估因素如:wav2lip的访问速度、搜索引擎收录以及索引量、用户体验等;当然要评估一个站的价值,最主要还是需要根据您自身的需求以及需要,一些确切的数据则需要找wav2lip的站长进行洽谈提供。如该站的IP、PV、跳出率等!

关于wav2lip特别声明

本站ai导航提供的wav2lip都来源于网络,不保证外部链接的准确性和完整性,同时,对于该外部链接的指向,不由ai导航实际控制,在2024年2月27日 下午1:57收录时,该网页上的内容,都属于合规合法,后期网页的内容如出现违规,可以直接联系网站管理员进行删除,ai导航不承担任何责任。

相关导航

暂无评论

暂无评论...