如果你以为OpenAI Sora只是像DALLE那样的创意玩意儿，那你就需要重新思考了。Sora是一个数据驱动的物理引擎，它能模拟各种世界，无论是现实的还是虚构的。这个模拟器通过去噪技术和梯度计算来学习复杂的渲染、直观物理、长期推理和语义基础。
如果说Sora使用了虚幻引擎5来训练大量合成数据，我一点也不会感到意外。它肯定是这样的！
让我们来分析一下下面的视频。提示：“两艘海盗船在一杯咖啡里航行并进行战斗的逼真特写视频。”
– 模拟器创建了两个精致的3D模型：装饰各异的海盗船。Sora必须在其潜在空间中隐式地解决从文本到3D的转换问题。
– 3D对象在航行时始终保持动态，并且能够避开对方的路径。
– 咖啡的流体动力学效果，包括船只周围形成的泡沫。流体模拟是计算机图形学中一个独立的子领域，传统上需要非常复杂的算法和方程来实现。
– 照片级的写实效果，几乎可以媲美光线追踪渲染。
– 模拟器考虑到杯子相对于海洋的尺寸较小，并运用移轴摄影技术来营造一种“微缩”的感觉。
– 场景中的语义在现实世界中是不存在的，但引擎仍然实现了我们所期望的正确的物理规则。
接下来：增加更多的模式和条件，我们就能得到一个完整的数据驱动的虚幻引擎，它将取代所有手工设计的图形处理流程。
OpenAI Sora生成的视频合集⬇️
本文地址：https://www.163264.com/6546