详情介绍
美图DreamAvatar是美图公司于2023年8月正式推出的一款AI数字人生成工具,核心定位是服务于视频内容创作、影视处理与剪辑等生产力场景。区别于传统的复杂建模,DreamAvatar首期推出的“AI演员”服务,通过先进的AI技术降低了数字人视频的制作门槛。它依托于美图影像研究院(MT Lab)的计算机视觉技术和3D人体姿态估计算法,能够精准捕捉真人动作,并将迁移到选定的数字人角色上,实现实景与CG角色的自然融合。除了面向C端用户的创意表达,DreamAvatar也承载着美图公司布局未来数字人应用的野心,技术可拓展至AI模特、AI主播、AI客服等广泛的商业领域。
官网入口地址
下载地址
用户可以在苹果App Store搜索“DreamAvatar”下载官方iOS版本。安卓用户建议前往美图公司官网或主流应用商店(如华为应用市场、小米应用商店等)搜索“DreamAvatar”获取官方正版App。
功能介绍
AI演员核心功能:这是DreamAvatar目前的主打功能。用户导入10秒以内的视频素材并指定需要替换的人物后,AI会自动完成人体检测、跟踪、背景修复及替换工作,最终输出由数字人“主演”的CG视频。
精准的动作同步:工具利用3D人体姿态估计和驱动算法,确保数字人的动作,包括肢体运动和手势,都能与原始视频中的真人演员同步,极大增强了视频的真实感。
逼真的场景融合:通过光照估计和相机姿态估计技术,生成的数字角色能够智能适配原始视频场景中的光线和环境,使虚拟角色与实景背景自然融合,避免出现“P上去”的违和感。
丰富的角色选择:为了满足不同创作者的想象,AI演员功能上线初期便推出了机器人、兽人、类人三大题材,共计11个不同风格的数字人形象,用户可以根据视频剧情自由选择。
形象与声音定制(即将上线/拓展功能):根据美图公司的规划,DreamAvatar未来将支持通过文字、照片、视频或3D扫描来打造真人的写实数字分身,同时支持形象和声音的深度定制,成为真正意义上的专属数字人。
应用场景
短视频创意创作:抖音、TikTok等内容创作者可以利用AI演员功能,快速制作出带有科幻、奇幻元素的创意短片,让自己的视频在海量内容中脱颖而出。
影视与广告制作:对于预算有限但有高效需求的独立制片人、广告公司,DreamAvatar可以将繁琐的CG制作流程简化,大幅缩短高效视频的制作周期,降作成本。
口播视频博主:AI主播功能(在“开拍”App中落地)可以帮助口播博主生成数字人分身,用于制作口播视频,提高内容产出效率。
电商与品牌营销:品牌可以定制专属的AI模特来展示服装,或者打造AI数字人员工,用于线上客服或品牌宣传,为用户提供新颖的互动体验。
补充介绍
定价方面:DreamAvatar App本身可以免费下载使用。在具体功能上,用户拥有一定的免费体验额度。根据App Store的信息,生成单个AI演员视频需要付费,有“AI演员生成视频 ¥5.00”的内购项目。具体价格请以App内实际显示为准。
技术底座:该工具背后的算法支撑是“美图数字人驱动算法”,该算法已于2023年8月通过国家深度合成服务算法备案,确保了技术应用的合规性。
美图数字人开放平台常见问题
DreamAvatar是由美图公司开发的。这家公司就是大家熟知的美图秀秀、美颜相机的母公司,在影像处理和AI技术领域有十几年的积累。
虽然美图数字人开放平台的官网是 https://www.dreamavatar.com/ 但目前DreamAvatar主要还是以App的形式提供服务,在官网上可以找到下载指引。如果你想直接在线体验美图的AI能力,可以访问美图AI开放平台(ai.meitu.com),那里提供了一些API在线体验功能。
可以把它理解为一个装在你手机里的“AI高效导演”。你只需要拍一段普通视频,它就能把视频里的你,一键替换成机器人、兽人或者他酷炫的数字人角色,而且你做什么动作,数字人也能做什么动作,特别适合用来创作有意思的CG短片。
使用起来很简单。在手机应用商店下载DreamAvatar App并打开。然后点击“AI演员”功能,从相册里导入一段你拍好的视频,长度在10秒以内。接着,画面里会出现一个框,你框选一下要替换的人物,剩下的工作像人体检测、跟踪、背景修复、替换渲染,AI都会自动帮你完成,等上几分钟到二十分钟左右,一段由数字人主演的视频就生成了。
DreamAvatar是免费下载的,不过属于“免费+内购”的模式。你下载后会有一些免费的体验机会,可以先试试效果。但如果要长期使用或者生成新的视频,就需要付费了,比如在App Store里显示生成一次视频大概是5块钱,具体价格你可以打开App内的充值页面看一下。
从技术和资质上来说是比较可靠的。它背后的“美图数字人驱动算法”已经在2023年通过了国家的深度合成服务算法备案,说明技术应用是合规的。而且美图是大公司,产品的稳定性和后续更新也有保障。
有的。导入的视频素材光线要好,人物动作别太快也别太复杂,这样AI捕捉得更准。因为生成需要排队和渲染时间(高峰期20多分钟),一次性把要做的视频都准备好,然后分批生成,别干等着。多试试它提供的11种不同角色,有些角色在特定光影场景下融合得更好。
特色就是“一键真人替换数字人”,这不是简单的加个滤镜或头套,而是通过3D人体姿态估计和光照估计,把整个人的形象替换掉,动作和光影还高度匹配。它专注于生产力场景,无论是用来做创意视频,还是未来计划中的AI模特、AI主播,都是为了解决实际的工作需求,而不仅仅是娱乐。
美图公司在隐私保护方面有明确的规范。根据用户协议和隐私政策,他们会采取严格的措施保护用户上传的信息,不会随意泄露你的视频数据。为了安全起见,建议你从官方应用商店下载App,并仔细阅读相关的隐私条款。
对于想拍点不一样视频的人来说,挺好用的。特别是那些想做高效但没有专业后期团队的个人创作者,用DreamAvatar几分钟就能搞定过去需要好几天才能完成的高效镜头。它毕竟是AI自动处理,对于一些非常复杂的动作或者特定的艺术要求,还需要人工后期微调,但对于大多数人来说,它带来的效率和创意已经是质的飞跃了。
DreamAvatar这个App本身不能直接生成PPT。它的专长是生成数字人视频。不过,美图公司还有另一款叫“美图设计室”的工具,专门用来做AI海报和PPT设计。如果你既要数字人,又要做PPT,可以两个工具搭配着用。
目前它还不能像Sora那样凭空文生视频。DreamAvatar的工作方式是“视频生视频”,也就是你提供一段真人实拍视频,它利用AI技术把里面的真人“替换”成数字人,生成一段新的CG风格视频。这样做的优点是能保留你想要的创意剧情和运镜,只是把演员变成了虚拟形象。
目前是有限制的。DreamAvatar首期推出的“AI演员”功能,支持最长10秒视频的转化。这主要是因为10秒是短视频的一个黄金片段时长,同时也受限于当前移动端的算力和处理效率。如果你想做更长的视频,可以分段拍摄制作,然后再用剪辑软件拼接起来。
| 分享笔记 (共有 篇笔记) |