阿里巴巴开源项目DreamTalk,能让人物头像栩栩如生地说话,支持多语言、歌曲、嘈杂音频匹配,开放更多开发者创新。
立法将支持内容创建者,而非模型开发者。
- 在日志语句、错误消息或代码注释中填充空白时,它很聪明。
当被问及把技术公开,其他友商跟进之后,会不会担心荣耀变成第二了,赵明表示:那是我们无能。”
另外,DreamTalk还具有说话风格预测的功能,能够根据语音预测说话者的风格,并同步表情,使得动画更加贴近原始音频。此外,该框架适用于多种场景,可以用于歌曲、不同类型的肖像,甚至在嘈杂环境中也能表现良好。