Luma公司发布的Dream Machine是一款先进的人工智能模型,专为根据文本指令和图像制作高质量、逼真且富有想象力的视频而设计。它建立在可扩展、高效、多模式的Transformer架构之上,并直接在视频上进行训练,能够生成物理上准确、连贯且充满动态的场景。如今,任何人均可在Luma平台上轻松使用Dream Machine来制作自己的视频。
作为Luma前沿生成模型系列的首款产品,Dream Machine旨在通过图像、视频、文本等富有表现力的输入激发创意灵感。与以往的图像动画模型相比,Dream Machine作为真正的视频生成模型,其速度和性能均表现出众。Luma公司致力于不断提升其效率,确保用户在使用过程中能够尽情释放创意,不受任何限制。
为了研发Dream Machine,Luma与Amazon Web Services(AWS)展开合作,利用其顶级的H100训练基础设施SageMaker HyperPod。该模型的早期反馈非常积极,反映了无数创意思维的释放。当您访问Luma的网站时,精美的视频作品即刻映入眼帘。从官方发布的视频来看,其质量卓越,无论是清晰度还是连贯性都表现出色。
对于图生视频功能,Dream Machine能够生成具有逼真流畅动作、电影摄影和戏剧效果的5秒镜头。它能够让您的照片跃然纸上,成为一个引人入胜的故事。Dream Machine对人与物体如何在物理世界中互动有着深刻的理解,这使其能够创建具有出色角色一致性和准确物理特性的视频。