科学家开发DIRFA:输入图片和音频,可生成说话视频
智能科技 2023-11-17 user639632
11 月 17 日消息,来自新加坡南洋理工大学(NTU Singapore)的科研团队近日开发出了 DIRFA 工具,用户给一张图片以及音频内容,可以自动生成 3D 视频,并实现口型和声音的同步协调。

DIRFA 的全称为 DIverse yet Realistic Facial Animations,训练了超过 6000 多人的 100 万个视频片段,音频片段来自一个名为 VoxCeleb2 数据集的开源数据库,并关联面部表情和头部运动。
研究人员表示,DIRFA 可能会在包括医疗保健在内的各个行业和领域带来新的应用,因为它可以实现更复杂和逼真的虚拟助手和聊天机器人,从而改善用户体验。
DIRFA 还可以作为言语或面部残疾人士的强大工具,帮助他们通过富有表现力的头像或数字表示来传达他们的想法和情感,从而增强他们的沟通能力。
【来源:IT之家】
The End
相关阅读
- 年轻人的第一台GT比亚迪海豹06GT 正式上市,售价13.68万元-18.68万元
- 董事长曾喊话马斯克要帮特斯拉造车:富士康造的Model B要开卖了
- 每日互动AI新品发布会:开启智能进化新纪元
- 你相信机器吗!何小鹏称智驾比人驾安全10倍 网友:为啥还要自己开
- 信启原力·智启未来——数云原力2025·数智金融论坛盛大召开
- 三星宣布 Galaxy AI 将适配更多国行版机型,包括 S23 系列等
- 《黑神话:悟空》获TGA多项提名 包括年度最佳游戏
- CES2026:双轮驱动出海,思必驰让中国AI创新成果惠及世界
- 微信聊天记录备份功能升级,支持外接设备存储
- 海信罗马假日mini斩获CES 2025创新奖,引领精致健康洗护潮流