AI下半场，“AI教母”李飞飞打响第一颗子弹：从“聊天”到“创造世界”

简而言之，生成 3D 宇宙：这种科幻场景如今已成为现实。 “AI教母”李飞飞创立的World Labs推出了首款商用世界模型产品Marble。这彻底改变了您创建 3D 世界的方式。用户只需上传照片、视频或输入文字，即可快速生成可编辑、可下载的虚拟环境，并且与 Vision Pro 和 Quest 3 完全兼容。这不仅对游戏开发者和电影特效艺术家来说是个好消息，也预示着人工智能从理解语言走向理解物理世界的新时代。 ・Marble 的“魔力”有多强大？一键3D宇宙生成器Marble的正式亮相，瞬间让World Labs在全球模型竞赛中占据领先地位。该产品两个月前首次出现在有限测试版中，它代表了一条与任何其他产品完全不同的技术路径。虽然像 Decart 和Odyssey 仍在提供小型免费演示，Google 的 Genie 仅处于有限的初步研究阶段，Marble 已经取得了商业上的成功。其主要技术进步是创建“持久”可下载 3D 环境的能力。这与虚拟世界有着根本的不同，虚拟世界是在用户探索时实时动态生成的。 World Labs 联合创始人 Justin Johnson 指出，这种技术途径可以有效减少场景扭曲和图像不一致，同时允许生成的世界以各种工业级格式导出，例如高斯溅射、网格和视频。据World Labs官方介绍，Marble在生成世界时较上一代模型有显着改进。世界更大、风格更多样化、3D几何形状更明确。 ·灵活的进入方式，细致到毛孔的真实细节。 Marble 在输入法方面提供了极大的灵活性。场景描述、库存图像和真实视频。剪辑，甚至粗略的 3D 设计，都可以用作生成材料的“介绍”。除了支持从单个文本消息或单个图像生成世界之外，它还可以将多个角度的图像或短视频作为输入，以创建高度逼真的数字孪生环境。 World Labs 去年展示的首批模型之一是在从单个图像生成交互式 3D 场景方面取得了突破，但仍然存在局限性，包括略显卡通的图形、有限的运动范围以及偶尔出现的渲染错误。 Marble 的官方测试体验允许您仅使用图像提示即可生成各种虚拟环境，从游戏场景到真实的客厅。修复的细节水平简直令人惊叹。约翰逊透露，在测试版中，场景边缘的处理还有改进的空间，但在正式版中已经对此进行了优化。更有趣的是我测试期间使用单一消息生成的世界在视觉效果和意图匹配方面显示出独特的优势，让人对正式版的表现感到兴奋。 ・原生 AI 编辑，混合 3D 创作“零阈值”Marble 是同类产品中第一个将原生 AI 编辑工具与称为 Chisel 的混合 3D 编辑器集成的。用户首先勾勒出一个粗略的空间布局（墙壁、立方体、平面等），然后通过文字提示定义视觉风格，最后AI间接填充细节。智能这种结构与风格分离的工作流程与使用HTML定义网站的架构，然后使用CSS控制其视觉呈现是一样的。思路清晰、高效。与传统的基于文本的编辑方法不同，Chisel 允许您直接操作 3D 对象，例如直接将代表沙发的 3D 框移动到任意位置，无需手动操作即可实现直观的可视化编辑任意编码。 ・无限扩展，借助集成创新世界实验室最近推出的“世界扩展”功能，编辑、收藏自由度得到了大幅提升。 Johnson 表示：“生成世界后，用户可以进行放大操作。如果发现场景中某个区域开始失焦，可以告诉模型放大该区域或添加细节。针对超大空间的创意需求，eMarble 的‘Composer 模式’支持多个世界的无缝融合。在现场演示中，Johnson 无缝连接了两个不同风格的世界：“奶酪室与葡萄椅”和“太空未来会议”房间。”系统根据已有的规则和风格自动生成增强3D空间，保证了世界扩展风格的统一性，让虚拟世界可以有多大。高斯溅射：在生成AI领域，高斯溅射（Splatting）被认为是高质量标准用于表示 3D 对象和空间。空间，在其中心处具有最大值，并且值沿着钟形曲线平滑减小。零到边缘分布方法可以准确模拟物体的亮度、不透明度、颜色和密度等光学特性。当大量喷射点相互重叠连接时，可以以惊人的精度模拟3D场景的光滑表面、丰富的色彩和复杂的灯光效果。图形专业人士，让您可以在几分钟内使您的作品取得成功。 ·多种风格，自由创作，想象力是极限。支持漫画、科幻、未来、奇幻、动画、写作等模型生成。特别值得一提的是，其复古风格使其能够准确还原老式电脑渲染典型的“低质量”视觉效果，为怀旧游戏和复古艺术品提供强大的工具。我可以满足你！马布尔的“野心”有多大o 彻底改变数千个行业？约翰逊说：“大理石未来的主题是‘创意控制’。我们需要保持快速制作的便利性，但我们也希望让用户能够对其创作细节有更多的控制权。我们不希望机器完全接管创作过程并剥夺用户的创造力。”他们透露，该场景重点关注三个主要领域：游戏开发、电影视觉效果和虚拟现实。游戏开发：为开发者赋能，而不是取代他们。他们使用 Marble 生成背景环境，并将获得的 3D 资源导入到主要游戏开发平台（例如 Unity 和 Unreal Engine）中，以进行编程和交互逻辑。您可以继续添加代码。它无意取代您的游戏开发流程。现有流程，但作为现有流程的补充，提供可直接集成的物质资源。他们特别强调“在工作流程中，Marble可以生成完整的3D世界数据，允许其他创作者在此基础上进行进一步的开发和效果改进，例如将生成的三角网格直接应用到游戏场景的构建中。最近在开发者大会上的调查显示，业界对生成式人工智能的负面看法正在增加，主要关注点集中在知识产权、功耗问题和所制作内容的质量上。 Marble关于“工具赋能”定位的主张可以为这些问题提供新的解决方案，而不是“完全替代”。影视特效：在电影视效领域，利用Marble生成的3D资源可以实现精准的场景布局，并提供帧级精准的镜头控制，大大提高效率。 · 虚拟现实：立即生成世界 Johnson 承认该行业面临“对内容的渴望”。目前，Marble 完全兼容拥有Vision Pro和Quest 3等领先的虚拟现实设备，并表示在机器人训练领域也展现出独特的潜力。到目前为止，大规模的训练数据库一直缺乏，但像 Marble 这样的全球生成器表示，他们可以轻松地为自动驾驶汽车和机器人等人工智能系统的开发提供大量真实的训练数据。此外，他指出，此类技术在实验模拟、药物开发和沉浸式学习等科学和医学领域也具有价值。她认为“空间智能将彻底改变我们创建虚拟和现实环境以及与虚拟和现实环境交互的方式”，未来，当我们阅读小说时，我们将能够直接生成3D场景来体验故事。计划范围从免费版本到每月 95 美元的旗舰版本，让具有不同需求的用户找到适合自己的选项。免费版本：支持4个一代又一代的文本/图像/全景。标准版：20美元/月，提供12小时生成，支持多种图像/视频输入和高级编辑。专业版：每月35美元，提供25小时的生成，包括场景扩展和商业许可。终极版：每月 95 美元，提供 75 小时的构建时间和完整的功能集，所有功能均已解锁。为了实现太空智能的愿景，World Labs 与明星云集的投资者群体合作，其中包括 Radical Ventures、Andreessen Horowitz 和 Nvidia 等顶级风险投资公司。筹集了 3000 万美元的资金。以及杰弗里·辛顿·辛顿、埃里克·施密特、马克·贝尼奥夫和里德·霍夫曼。目前，来自世界各地的多个团队正在研究全球模型，包括 Google 的 Genie、NVIDIA 的 Cosmos 和人工智能初创公司 Decart。 Meta 首席人工智能科学家 Yann LeC 值得注意的是，据传联合国先生正在为他的全球模型启动项目寻求早期资金，建议预计这场“空间智能”的竞争将会非常激烈。 Marble的推出不仅是World Labs的里程碑，也是AI真正理解物理世界并与物理世界互动的重要一步。李飞飞表示：“空间智能将改变我们创造现实和虚拟世界以及与现实和虚拟世界交互的方式。它将彻底改变讲故事、创造力、机器人、科学发现等领域。这将是人工智能的下一个前沿领域。” （晓晓）