近日,字节跳动提出的新框架DreamActor-M1在动作捕捉领域引发广泛关注。该框架利用扩散式Transformer(DiT)生成高质量、富有表现力且真实感十足的人体动画,仅需一张参考图像即可模仿视频中的人物行为,生成从肖像到全身的动画。
基于DreamActor-M1的AI生成视频在X平台上爆火,其中玛丽莲·梦露的“复活”视频更是引发了网友的惊叹,认为AI技术已经达到了不再需要动捕的地步。
研究显示,DreamActor-M1在运动引导、尺度适应和外观引导方面表现出色,能够生成长期一致且富有表现力的动画,优于现有先进技术。