今天凌晨,李飞飞空间智能首个产品惊艳亮相。开局一张图,它就能生成一个3D 视频游戏场景。虽说现在有不少AI都能把照片转化为3D模型,但WorldLabs带来的不只是建模,而是一个真正可交互、可编辑的活体世界。
大多数生成式AI工具都制作图像或视频等2D内容。相反,以3D形式生成可以提高控制和一致性。这将改变我们制作电影、游戏、模拟器和物理世界的其他数字表现形式的方式。
突破与优势
实际上,当前市场不乏3D生成模型,但通常会出现许多问题。比如初创公司Decart的Minecraft模拟器Oasis,要么画面不够清晰,要么场景布局经常混乱。相比之下,WorldLabs却创造出了一个稳定、真实且符合物理规则的3D世界。
一个活的世界,比一千张死的图片更有价值。
3D游戏世界
-
场景生成好后,你就成了一个虚拟摄影师,在浏览器里实时操控相机,想拍什么角度就拍什么角度,如同专业摄影。还能模拟浅景深,不过,只有距离相机一定距离的物体才能清晰对焦:
-
推拉镜头也没问题。
WorldLabs的核心突破在于,他们没有止步于像素级的表面呈现,而是直指3D场景生成的本质优势:
- 恒久的现实:创造出来的3D世界是稳定的,不会消失或者偷偷改变。
- 实时控制:生成场景后,想去哪去哪,甚至能凑近看花朵的每个细节。
- 真实的物理规则:生成的世界遵循现实世界的物理法则,没有漂浮的物体,没有穿墙的bug,就像现实世界一样自然。
WorldLabs还表示,通过深度贴图技术,他们成功让每个像素都有了真实的空间距离感。而图片中每个像素的颜色,都是由它和摄像头的距离来决定的。
不仅如此,WorldLabs还给场景注入了灵魂——添加各种互动特效,打造动画效果,让整个世界活起来。来都来了,脑洞大开的WorldLabs还能把梵高、霍珀这些大师的名画还原成可以探索的3D世界。不得不说,绝美。而且原画里没有的东西,它都能「脑补」出来,而且出奇地合理。
联动Midjourney,让创作者玩转3D新世界
说到创作过程,3D生成的世界还能和其他AI工具完美配合,这意味着创作者可以用自己熟悉的工具,创造出全新的体验。比如说,WorldLabs可以先使用文本到图像模型生成图像,从而从文本创建世界。不同的模型有自己的风格,而这些独特的风格都能被保留下来。
来看个具体的例子。WorldLabs团队基于同一提示词,让不同的AI画了四个版本的青少年卧室。
已经有一些创作者通过与WorldLabs达成合作,提前用上了。比如,Eric Solorio就展示了怎么用它来设计人物动作和控制镜头。而Brittani Natali则把WorldLabs的技术和Midjourney、Runway、Suno、Exa和AiBard结合起来,创造出了迷人的互动式3D体验。
展望未来
WorldLabs的创始人兼首席执行官普拉维尔·塞萨西尼相信,他们的技术将释放创造力的巨大潜力。他表示:“我们相信,3D创作应该像拼乐高一样容易,而WorldLabs正是这一愿景的基石。”
随着技术的不断发展,我们可以期待WorldLabs创造出更多令人惊叹的3D体验。对于游戏开发者、电影制作人、建筑师以及其他依赖视觉内容的创作者来说,这无疑是一个令人振奋的突破。
发表评论