阿里重磅开源Happy Oyster:一句话生成可交互3D虚拟世界

阿里达摩院近日开源发布了一款革命性的AI模型Happy Oyster(快乐生蚝),这款世界模型能够仅凭一段文字描述或一张静态截图,即可生成可交互的3D虚拟场景。用户可以在生成的场景中进行第一人称探索,并实时修改世界设定,为游戏开发、虚拟现实、影视制作等领域带来了全新的创作方式。

阿里Happy Oyster AI生成3D虚拟场景

一、文字与截图双模式,灵活生成3D场景

Happy Oyster最大的亮点在于其双模式输入能力。用户既可以输入一段文字描述,例如"一个漂浮在云端的古代城堡",也可以直接上传一张场景截图,模型便会智能理解场景结构,自动生成对应的3D虚拟空间。这种灵活的输入方式大大降低了3D内容创作的门槛,让非专业用户也能快速构建复杂的虚拟场景。

生成的场景并非静态图像,而是真正的3D空间,用户可以以第一人称视角在其中自由行走、旋转视角、观察细节。这种沉浸式体验远超传统2D图像生成工具,为创作者提供了更广阔的表达空间。

二、实时交互修改,动态调整世界设定

除了场景生成,Happy Oyster还支持实时交互修改功能。用户在探索过程中可以随时调整场景的光照、天气、物体位置等参数,甚至可以改变整体的世界观设定。例如,原本晴朗的天空可以一键切换为暴风雨天气,城堡的风格也可以从中世纪改为未来科幻风格。

这种实时修改能力使得Happy Oyster非常适合用于快速原型设计、游戏关卡测试、虚拟展览等场景。创作者无需重新建模,只需调整参数即可快速迭代,极大提升了创作效率。

三、开源生态赋能,多领域应用前景广阔

作为开源项目,Happy Oyster提供了完整的模型权重和代码,开发者可以基于自身需求进行定制化开发。在游戏行业,它可以用于快速生成游戏场景原型;在影视制作中,可以帮助导演预览镜头效果;在教育领域,可以创建沉浸式的虚拟教学环境。

此外,Happy Oyster的开源也推动了世界模型技术的普及,为学术界和工业界提供了宝贵的研究资源。阿里达摩院表示,希望通过开源加速AI技术在3D内容创作领域的落地应用,让更多创作者受益于这一创新技术。

AD:精心整理了2000+好用的AI工具!点此获取

相关推荐

1 1

免费AI工具合集,点击进入

AI对话

玉米AI助手