复旦&腾讯联手搞事情!DICE-Talk让照片“活”起来,表情超自然!
DICE-Talk是什么?
DICE-Talk是由复旦大学与腾讯联合推出的一款创新性情感化动态肖像生成工具。它通过身份-情感分离处理机制,将说话人的身份特征(如面部细节、肤色)与情感表达(如表情、语气)解耦,确保在情感变化时人物外观保持高度一致,避免传统生成工具中常见的“表情跳变”问题。此外,DICE-Talk支持多种情感状态(如快乐、生气、惊讶等)的动态切换,生成接近真人表演的流畅效果。用户只需上传一张肖像图片和一段音频,系统即可自动生成相应情感的动态视频,适用于影视制作、游戏开发及社交媒体等领域。这项技术标志着AI在情感表达和动态肖像生成领域的重大突破
告别“表情跳变”,DICE-Talk是如何做到的?
DICE-Talk最厉害的地方,就是它能把人物的“皮囊”(身份特征,比如脸型、肤色)和“灵魂”(情感表达,比如表情、语气)彻底分开处理。这样一来,就算人物的情绪再激动,脸还是那张脸,不会出现那种AI生成里常见的“表情跳变”的尴尬情况。更神奇的是,它还能让各种情绪之间自然过渡,比如从开心到惊讶,就像真人表演一样流畅自然!
想让照片“喜怒哀乐”,只需简单几步!
DICE-Talk的核心技术就是解构身份信息,然后根据需求赋予不同的情感。简单来说,你只需要上传一张照片和一段音频,系统就能自动生成带有各种情感的动态视频,比如快乐、生气、惊讶等等。而且每种情感都超逼真,表现力十足!无论是影视制作、游戏开发还是社交媒体,都能用得上!
想体验?硬件要求可不低哦!
想让DICE-Talk跑起来,硬件可不能太差。官方建议最好配备至少20GB显存的GPU,还得用独立的Python3.10环境。另外,FFmpeg和对应版本的PyTorch也得安排上。安装完成之后,就可以通过简单的命令运行演示,感受一下AI带来的视觉盛宴啦!
操作简单易上手,小白也能玩转!
DICE-Talk的操作非常简单,只需要上传一张图像和一段音频,选择想要的情感类型,系统就能自动生成对应的视频。而且你还可以调整身份保持和情感生成的强度,定制个性化的效果。更贴心的是,DICE-Talk还提供了图形用户界面,操作起来更直观更友好,简直就是小白福音!
还等什么?赶紧去试试吧!
github地址:https://github.com/toto222/DICE-Talk
想了解更多AI创作软件工具请关注AI人工智能网站--AITOP100平台--AI工具集
请先 登录后发表评论 ~