Luma Dream Machine - AI视频生成

Dream Machine 概览

母公司：Luma AI

创始人：CEO Amit Jain/CTO Alex Yu

类型：文本转视频（Text to video），图生视频（Image to video）

发布时间：2024年6月12日

Luma Dream Machine 简介

Luma Dream Machine 是 Luma AI 公司开发的一款强大的 AI 视频和图像生成平台。 Dream Machine 基于 Luma AI 的先进视觉 AI 模型构建，旨在为用户提供轻松创建高质量、逼真且富有创意的视频和图像的工具。Dream Machine在可扩展、高效且多模态的转换器架构上构建了 Dream Machine，并直接在视频上对其进行了训练。这使得它能够生成物理上准确、一致且充满动感的场景。

Luma Dream Machine 最新动态

视频修改工具（Modify Video）： Luma AI 于2025年6月2日推出了Modify Video工具，允许用户在保持原始动作和摄像机动态的同时，完全改变视频的风格、角色和背景。这项功能旨在帮助视频创意者在后期制作中更轻松地进行风格、纹理和世界交换，无需繁琐的绿幕或动作捕捉。
与HUMAIN建立合作关系：2025年5月15日，Luma AI 与HUMAIN（由沙特阿拉伯公共投资基金支持的全栈AI公司）宣布建立突破性合作关系，以加速多模态AGI（通用人工智能）的发展。
Reframe功能：2025年5月9日，Luma AI 推出了Reframe功能，能够智能地扩展和调整图像或视频的边界，以适应各种格式，非常适合社交媒体或电影制作。
Ray2集成到Adobe Firefly：Adobe公司宣布将Luma AI 的Ray2生成视频模型集成到Firefly中，使用户能够创建逼真的视频。
Camera Motion Concepts (摄像机运动概念)：2025年3月31日，Luma AI 推出了Concepts功能，为Ray2带来了新的控制方式，包括Camera Motion Concepts，允许用户精确控制视频生成中的摄像机运动。
新用户界面上线：2024年11月，Dream Machine 推出了全新的用户界面。所有用户都将继续通过新的 UI 访问 Dream Machine，旧的 Legacy 模型于2025年1月31日停止使用。

Luma Dream Machine 发展历史

Luma Labs 于 2021 年由 Amit Jain、Alberto Taiuti 和 Alex Yu 在美国旧金山成立，公司最初专注于人工智能驱动的逼真 3D 捕获技术，主要用于电子商务。
2024 年 1 月 9 日，Luma AI 完成了 A 轮融资，获得了 2000 万美元的投资.
2024年6月12日，Luma正式宣布Dream Machine向所有人开放，开启免费试用。
2024年7月1日，Luma发布关键帧功能，允许用户设定视频的起始和结束关键帧。
2024 年 12 月 6 日，Luma AI 完成了 9000 万美元的 C 轮融资。

Luma Dream Machine 主要版本

Ray2：新一代的视频模型，能够生成快速连贯的运动、超现实的细节和逻辑事件序列。 Ray2提高了生成视频的成功率，使其更适用于生产。 Ray2目前已在Dream Machine中提供，付费用户可优先使用。
Photon：下一代图像模型，专为视觉思维和快速迭代而构建。 Photon的效率比同类模型高8倍，速度更快。
Dream Machine：基于Luma AI 的文本到视频和文本到图像AI模型构建，于2024年6月推出。 Dream Machine允许用户创建高质量、逼真且富有创意的视频和图像。

Luma Dream Machine 关键特性

文本到视频：用户只需提供文本指令，即可快速生成高质量、逼真的视频。
图像到视频：静态图像可以通过自然语言指令快速转换为高质量的动画。
Modify Video 工具：允许用户在保持原始动作和摄像机动态的同时，对现有视频进行风格、纹理和世界交换等修改。
Keyframe Control (关键帧控制)：用户可以使用开始和结束关键帧来引导视频创作，控制叙事流程。
Video Extension and Looping (视频扩展和循环)：用户可以扩展视频序列或创建无缝循环。
Camera Motion Control (摄像机运动控制)：用户可以通过简单的文本输入来控制视频生成中的摄像机运动。
Variable Aspect Ratios (可变宽高比)：API 可以生成针对不同平台优化的视频。
个性化功能：Dream Machine 具有突破性的个性化功能，让创作者能够将自己的灵感融入其中，创建符合目的的图像和视频。
API 可用性：Dream Machine API 已发布，允许开发者将这些功能集成到自己的应用程序中。
多层次审核系统：Dream Machine 采用 AI 过滤器和人工监督相结合的多层次审核系统，确保技术负责任地使用。

Luma Dream Machine 主要功能

Dream Machine支持文生视频(Text to video)，图生视频功能(Image to video)，同时支持关键帧进行视频生成控制等功能。

Luma Dream Machine 视频生成效果

Dream Machine默认生成长度为5s的视频，默认视频为24帧

Luma Dream Machine 价格

Dream Machine每月提供30次免费生成额度

Dream Machine包月和包年套餐，以包月套餐为例，有“Plus”“Pro”“Premier”三个版本，收费分别为64.99美元、99.99美元、499.99美元。

Luma AI简介

Luma AI成立于2021年，起初是一家聚焦于3D内容生成的技术公司，提供3D内容生成和3D内容重建技术解决方案。截至目前，Luma AI已经推出了拍摄捕获3D图片和视频、Image to 3D（图片生3D）、Video to 3D（视频生3D）、Text to 3D（文字生3D）等功能。

Luma AI 认为，人工智能的未来是丰富、视觉化、物理智能和交互式的。他们正在开发和扩展能够看到、理解、展示、解释，并最终与现实世界互动的人工智能系统。 Luma AI 的目标是成为一种新型的智能创意伙伴，帮助人们更有效地想象和实现想法。他们目前提供Dream Machine等产品，允许用户通过AI生成高质量的视频和图像。