阿里巴巴与北邮联合推出FantasyPortrait,开启数字人动画新纪元
阿里巴巴与北邮发布FantasyPortrait:数字人动画技术的飞跃
在数字人技术的重大进展中,阿里巴巴与北京邮电大学(BUPT)合作推出FantasyPortrait项目,突破了动画中面部表情迁移与多角色控制的边界。
数字人情感表达的革命性突破
该项目采用表情增强扩散变换器(DiT)技术,在单人和多人场景中实现高度真实的情感表达。与传统方法不同,FantasyPortrait能精准复现微妙微笑或强烈愤怒等表情,同时保持高保真度。

其突出特点是能够同时管理多个角色的独立面部表情——解决了旧技术中常见的表情干扰问题。这一突破为电影制作、虚拟现实和游戏行业开辟了新可能,这些领域对细腻的角色互动至关重要。
多模态灵活性:超越人类角色
FantasyPortrait不仅限于人类形象。该技术还支持动物动画,拓宽了创意应用范围。此外,它提供音频驱动功能,将数字人的表情和动作与音频输入同步——非常适合虚拟主播或互动内容。
开源承诺与行业协作
阿里巴巴宣布计划将FantasyPortrait的代码和模型开源,降低全球开发者的使用门槛。此举符合该公司通过可访问工具促进AI创新的整体战略。
阿里巴巴与北邮的合作彰显了产学研合作的力量。北邮在AI研究领域的专长与阿里巴巴的工程实力相结合,为开发这一尖端解决方案提供了关键支持。
跨行业核心应用场景
- 影视与游戏:为多角色场景简化动画制作流程。
- 虚拟现实:通过逼真虚拟形象增强沉浸式体验。
- 内容创作:为创作者提供音频驱动的动画工具赋能。
该项目有望成为数字人技术的新标杆,在质量提升和创意灵活性方面均有突破。开发者可在代码发布于GitHub后探索其潜力。
关键亮点:
- 采用表情增强DiT技术实现精准情绪控制。
- 实现多角色表情独立运作且无干扰。
- 支持人类、动物及音频驱动动画。
- 未来将通过开源释放全球开发者潜能。
