科学家开发DIRFA:输入图片和音频,可生成说话视频
智能科技 2023-11-17 user639632
11 月 17 日消息,来自新加坡南洋理工大学(NTU Singapore)的科研团队近日开发出了 DIRFA 工具,用户给一张图片以及音频内容,可以自动生成 3D 视频,并实现口型和声音的同步协调。

DIRFA 的全称为 DIverse yet Realistic Facial Animations,训练了超过 6000 多人的 100 万个视频片段,音频片段来自一个名为 VoxCeleb2 数据集的开源数据库,并关联面部表情和头部运动。
研究人员表示,DIRFA 可能会在包括医疗保健在内的各个行业和领域带来新的应用,因为它可以实现更复杂和逼真的虚拟助手和聊天机器人,从而改善用户体验。
DIRFA 还可以作为言语或面部残疾人士的强大工具,帮助他们通过富有表现力的头像或数字表示来传达他们的想法和情感,从而增强他们的沟通能力。
【来源:IT之家】
The End
相关阅读
- OPPO最强标准版旗舰 OPPO Find X7白色版开售:3999元起
- 全景透视 2026 中国人形机器人行业:核心玩家拆解与规模化路径
- Bitget 荣获 Cryptonomist Awards 2025 「年度最佳加密货币交易所」称号
- 30年后,英伟达CEO黄仁勋重回公司诞生地
- 3000 元预算游戏显卡买谁?索泰 RTX 5060 夜莺 OC 是优选
- 企业出题高校攻关,合合信息与上海交通大学建立长期合作关系
- 为不被美国封禁,今年字节跳动和TikTok游说花了多少钱?
- 马斯克驳斥SpaceX补贴火箭发射言论:没有一次拼车发射任务亏过钱
- 小米发布首款家庭NASXiaomi智能存储,6月24日开启众筹预约
- iOS 17.4和iPadOS 17.4的第三个开发者测试版发布