Luma AI 快速入门

一句话生成可旋转的 3D 模型,一张图变成电影级短视频——把”会动的世界”装进浏览器。

这是什么?适合谁?

Luma AI 是 Luma Labs 在 2023 年推出的多模态生成工具,核心能力是用文本或图片生成高质量 3D 模型(NeRF / Gaussian Splatting)与短视频,产品线包括视频生成的 Dream Machine、3D 生成的 Genie、图像生成的 Photon。它和传统 3D 软件(Blender、Maya)最大的区别在于:不需要懂建模、不需要写代码,普通用户用自然语言或一张参考图,就能在几分钟内拿到可旋转的 3D 资产或可播放的视频片段。

Luma 在 2024 年发布的 Dream Machine 视频模型,把”文生视频”门槛降到普通创作者也能用的程度——生成的视频通常 4-5 秒,支持 1080p,有运镜感、运动连贯性和真实光影,适合做短视频素材、产品概念演示、艺术创作原型。它的 3D 模型输出格式兼容 glTF、USDZ,可以直接被 Blender、Unity、Unreal Engine 等专业工具二次使用。

适合谁:做短视频/广告创意的视觉设计师;做产品概念展示的工业设计师;研究 NeRF / Gaussian Splatting 的 3D 开发者;想在社交媒体发布”会动”内容的小白创作者。不适合需要长视频(>1 分钟)、专业影视级镜头控制的从业者(那种场景下仍要 Pika、Runway、Sora 配合)。

准备工作

• 浏览器:Chrome、Edge、Safari 最新版,Web 端体验已足够完整
• 账号:Google 账号(海外用户) 或邮箱注册,国内用户建议准备 Gmail
• 网络:海外服务,可能需要国际网络连接,移动端 App 在国内应用市场可能未上架
• 网络环境:有 Google 账号的用户最方便,国内邮箱注册也能用
• 心态:免费版每月有数量有限的免费生成额度(以官网公示为准),够跑通流程

3 步快速上手

第 1 步:打开官网并登录

浏览器访问 lumalabs.ai,点右上角「Try Now」或「Sign In」,用 Google 账号或邮箱注册并登录。首次登录会进入产品总览页,左侧导航能看到 Dream Machine(视频)、Genie(3D)、Photon(图像) 三个核心模块。

第 2 步:进入 Dream Machine 视频生成

点「Dream Machine」,进入视频生成工作台。界面非常简洁:一个提示词输入框 + 一个「Generate」按钮。

在输入框里用英文写一段画面描述,推荐”主体+动作+镜头+氛围”四段式,例如:

A golden retriever running along a beach at sunset,
slow motion, cinematic camera tracking, golden light

(国内用户也可以用中文写,系统会自动翻译,但英文效果通常更稳定。)

第 3 步:生成并下载

点「Generate」,等待约 60-120 秒,Luma 会返回一段 4-5 秒的短视频。点开预览,看到满意的就点右下角「Download」保存为 MP4 文件。任务完成——你刚刚用一句话生成了一段电影感短视频。

进阶玩法:上传一张图片(图生视频),AI 会让图片中的主体”动起来”;或者改用 Genie 模块,把图片变成可旋转的 3D 模型,直接嵌入到自己的产品页或游戏里。

常见踩坑

1. 生成失败/排队时间过长:高峰期(美国晚间)排队可能 5-10 分钟,失败时会扣除额度。错峰使用,或在提示词前加”simple”减少渲染压力。
2. 生成的视频主体变形:复杂人物动作(跳舞、格斗)经常出现肢体扭曲。简化提示词,只保留一个核心动作(如”running”),加上”slow motion”减慢运动速度。
3. 中文提示词效果不稳定:Luma 在英文数据上训练得更充分,中文提示词有时会被误译。建议先用中文写,再用 ChatGPT 翻译成英文喂给它。
4. 下载的视频带水印:免费版下载的 MP4 末尾有 1-2 秒的 Luma 水印。要去除水印,需要订阅付费会员(Standard 24.99 美元/月起,价格以官网为准)。
5. 生成的 3D 模型不闭合:Genie 模块生成的 3D 资产偶尔有”破洞”,是当前 Gaussian Splatting 的固有限制。简单主体(物体、人物)效果好,复杂建筑/地形会有瑕疵。
6. API 接入需要单独申请:想批量调用 Luma API,需要到 lumalabs.ai/developers 申请 API Key,免费层每月有额度,商业用途需付费。

初级用法

1. 用图生视频做”老照片动起来”:上传一张自己拍的照片(如宠物、风景、城市),加一句”slow camera zoom in”作为动作描述,几秒钟就能出”会动”的短视频,适合发朋友圈。
2. 用 Genie 做产品 3D 展示:上传产品 4 个角度的参考图(正/侧/背/顶),Genie 会合成一个可旋转的 3D 模型,导出 glTF 嵌入到自己的电商网站,免去专业建模成本。
3. 结合 ChatGPT 写提示词:不确定怎么写英文提示词?把中文想法发给 ChatGPT:“请帮我写一段 20 字的 Luma Dream Machine 英文提示词,主体是…“,然后复制粘贴即可。

高级玩法

1. 做产品概念演示视频:上传一张产品概念图(自己用 Midjourney 出的),加”rotating 360 degrees, white background, studio lighting”,几秒钟就能出产品旋转展示视频,适合发产品众筹页。
2. Gaussian Splatting 真实场景重建:用 Luma 的 iOS App “Luma Field” 录一段真实物体的环绕视频(2-3 分钟),云端会自动重建出可 3D 预览的真实场景资产,适合做房地产/文物的 3D 化存档。
3. 视频续写与变体:Dream Machine 生成的视频可以直接用 Extend 功能续写,一段 4 秒的视频可以接力延长到 8 秒、12 秒,通过多次续写拿到更长片段(但每段续写都会扣额度)。

小技巧

1. 提示词控制在 20-30 词:Luma 对超长提示词支持有限,超过 50 词经常被截断或忽略后半段,精简表达更稳。
2. 加 “cinematic” / “slow motion” / “35mm film”:这些电影感关键词能显著提升画面质感,出片更接近电影而非”AI 短视频”。
3. 明确指定镜头运动:“camera pans left” / “dolly zoom in” / “static shot” 等镜头语言关键词,比单纯的画面描述更可控。
4. 失败重试常有意想不到的好结果:同样的提示词多次生成,AI 抽样的随机性会带来不同结果,失败一次重试往往有惊喜。
5. 保存常用提示词模板:把效果稳定的提示词存到 Notion/记事本,后续做系列内容时复用,效果更稳定。

参考链接

• Luma 官网:https://lumalabs.ai
• Dream Machine 视频生成:https://lumalabs.ai/dream-machine
• Genie 3D 生成:https://lumalabs.ai/genie
• Luma 开发者文档(API):https://lumalabs.ai/docs
• Luma 博客(更新与教程):https://lumalabs.ai/blog
• 视频教程(Bilibili 搜索 “Luma Dream Machine 教程”):https://www.bilibili.com

本文基于官方文档和公开资料整理，AI辅助生成，MagicNetWorld 尚未完成独立实测。如有错误或过时信息，请通过 contact@magicnetworld.com 反馈。