Luma AI 是由 Luma Labs 打造的一款面向创作者与专业用户的 AI 视频及 3D 内容创作工具,适配 iOS 和网页端,凭借 NeRF 技术以及 Ray2、Dream Machine 等核心引擎,能让普通用户无需专业设备和技术,就能低成本制作高质量 3D 模型与影视级动态视频,深受影视制作人、建筑设计师、游戏美术团队等专业群体以及普通创意创作者的青睐。其主要功能聚焦 3D 建模与视频创作,具体如下:
3D 捕捉与场景重建
该 APP 能将智能手机变为 3D 捕捉工具,用户借助手机摄像头扫描真实物体,就能生成还原物体纹理、光照和深度的高质量 3D 模型;同时,上传多张照片或短视频,还可重建出具备真实光照与几何结构的 3D 场景。生成的 3D 资源支持 Gaussian Splats 输出,也能导出 glTF/OBJ 等常见格式,方便接入游戏引擎或用于建筑虚拟漫游等场景。此外,平台还向开发者开放 API,便于将 3D 建模和重建能力集成到其他应用中。
多模态视频生成
一方面支持文生视频,通过 Dream Machine 模块,输入中文或英文的自然语言提示词,几分钟内就能生成 5 – 9 秒的高质量视频,还能捕捉复杂细节、反射和灯光效果,保障视频物理准确性,同时提供电影化的摄像机运动效果;另一方面支持图生视频,上传单张或多张图片后,可生成带有相机运动的短视频,很适合用于产品展示类社媒内容创作。且免费用户可用 Ray2 模型实现这两类视频生成,该模型相比旧版生成速度提升三倍,成本降低三分之二。
视频精细化编辑与优化
其支持 120fps 高帧率输出和自适应插帧,让视频画面更流畅;还能拖动时间轴通过时空延展补全功能延长视频时长,AI 会自动补全画面和动作以保证连贯性。此外,用户可自定义虚拟相机路径、视角切换和运动曲线,通过关键帧编辑实现镜头平滑过渡,也能调整视频的材质和光照风格,快速塑造不同创作氛围。
辅助创作与高效输出
内置电影级 LUT、卡通风、写实风等多种风格模板,搭配 Luma photon 工具可基于文本生成高分辨率图像,助力用户快速搭建创作框架;输出上支持最高 4K 的高分辨率渲染,满足商业级素材需求,同时兼容 MP4、MOV 等常见视频格式,方便直接用于发布或后续二次编辑。另外,它还提供本地轻量计算与云端高性能渲染两种模式,企业和团队用户还能借助批量处理与 API 接入能力,将其纳入自动化创作流水线。
