今天凌晨,李飞飞空间智能首个产品惊艳亮相。开局一张图,它就能生成一个3D视频游戏场景。虽说现在有不少AI都能把照片转化为3D模型,但WorldLabs带来的不只是建模,而是一个真正可交互、可编辑的活体世界。
除了原始输入的图片,所有内容都是通过AI生成。WorldLabs在博客中说道:大多数生成式AI工具都制作图像或视频等2D内容。相反,以3D形式生成可以提高控制和一致性。这将改变我们制作电影、游戏、模拟器和物理世界的其他数字表现形式的方式。
实际上,当前市场不乏3D生成模型,但通常会出现许多问题。比如初创公司Decart的Minecraft模拟器Oasis,要么画面不够清晰,要么场景布局经常混乱。相比之下,WorldLabs却创造出了一个稳定、真实且符合物理规则的3D世界。
一个活的世界,比一千张死的图片更有价值
一个活的世界,比一千张死的图片更有价值。一张图生成一个3D游戏世界?李飞飞空间智能首秀开局一张图,结局竟是一个世界?一起来看看WorldLabs产品生成的3D游戏世界。
推拉镜头也没问题
WorldLabs的核心突破在于,他们没有止步于像素级的表面呈现,而是直指3D场景生成的本质优势:
- 恒久的现实:创造出来的3D世界是稳定的,不会消失或者偷偷改变。
- 实时控制:生成场景后,想去哪去哪,甚至能凑近看花朵的每个细节。
- 真实的物理规则:生成的世界遵循现实世界的物理法则,没有漂浮的物体,没有穿墙的bug,就像现实世界一样自然
WorldLabs还表示,通过深度贴图技术,他们成功让每个像素都有了真实的空间距离感。而图片中每个像素的颜色,都是由它和摄像头的距离来决定的。
不仅如此,WorldLabs还给场景注入了灵魂
不仅如此,WorldLabs还给场景注入了灵魂——添加各种互动特效,打造动画效果,让整个世界活起来。
来都来了,脑洞大开的WorldLabs还能把梵高、霍珀这些大师的名画还原成可以探索的3D世界
不得不说,绝美。而且原画里没有的东西,它都能「脑补」出来,而且出奇地合理。
联动Midjourney,让创作者玩转3D新世界
说到创作过程,3D生成的世界还能和其他AI工具完美配合,这意味着创作者可以用自己熟悉的工具,创造出全新的体验。比如说,WorldLabs可以先使用文本到图像模型生成图像,从而从文本创建世界。不同的模型有自己的风格,而这些独特的风格都能被保留下来。
来看个具体的例子。WorldLabs团队基于同一提示词,让不同的AI画了四个版本的青少年卧室。
发表评论