Sora到底懂不懂物理世界? AI视频生成引发行业震惊[多图]
2024-02-21 00:00:00 小编: 我要评论
Sora最近很火爆,AI视频生成让行业内发生了很大变动,对于Sora已经有不少业内的大佬开始激烈探讨,想要了解Sora到底懂不懂物理世界,那么大家可以看看下方游戏鸟小编带来的最新资讯,方便大家更好的了解哦。
Sora到底懂不懂物理世界
Sora 到底是不是物理引擎甚至世界模型?图灵奖得主 Yann LeCun、Keras 之父 Francois Chollet 等人正在深入探讨。
最近几天,OpenAI 发布的视频生成模型 Sora 成了全世界关注的焦点。
【关注机器之心视频号,第一时间看到有趣的 AI 内容】
和以往只能生成几秒钟视频的模型不同,Sora 把生成视频的长度一下子拉长到 60 秒。而且,它不仅能了解用户在 Prompt 中提出的要求,还能 get 到人、物在物理世界中的存在方式。
以经典的「海盗船在咖啡杯中缠斗」为例。为了让生成效果看起来逼真,Sora 需要克服以下几个物理难点:
规模和比例的适应:将海盗船缩小到能够在咖啡杯中缠斗的尺寸,同时保持它们的细节和结构,是一个挑战。AI 需要理解和调整这些对象在现实生活中的相对尺寸,使得场景在视觉上显得合理;
流体动力学:咖啡杯中的液体会对海盗船的运动产生影响。AI 模型需要模拟液体动力学的效果,包括波浪、溅水和船只移动时液体的流动,这在计算上是复杂的;
光线和阴影的处理:为了使场景看起来真实,AI 需要精确地模拟光线如何照射在这个小型场景中,包括咖啡的反光、船只的阴影,以及可能的透光效果;
动画和运动的真实性:海盗船的运动需要符合真实世界的物理规律,即使它们被缩小到咖啡杯中。这意味着 AI 需要考虑到重力、浮力、碰撞以及船体结构在动态环境中的行为。
虽然生成效果还有些瑕疵,但我们能明显感觉到,Sora 似乎是懂一些「物理」的。英伟达高级研究科学家 Jim Fan 甚至断言,「Sora 是一个数据驱动的物理引擎」,「是一个可学习的模拟器,或『世界模型』」。
-
王者荣耀火力官网正版下载安装 v3.74.1.61900MB角色扮演
-
蜡笔小新之小帮手大作战免费版39.96MB休闲益智
-
啸风蛮荒专属角色扮演
-
宠物美国鹰生活模拟3D 435M模拟经营
-
巴尔干驾驶区229.45MB赛车游戏
-
香肠派对ss2正式服下载安装 v13.701910MB角色扮演
-
篮球训练比赛游戏146.81MB | 体育竞技2024-03-06
-
爱消除货柜游戏31.54MB | 休闲益智2024-03-06
-
没有中间商赚差价内置菜单版127MB | 模拟经营2024-03-06
-
没有中间商赚差价最新版136.5MB | 模拟经营2024-03-06
-
跳跃的忍者猫咪游戏41.09MB | 休闲益智2024-03-06
-
找出伪人游戏60.12MB | 休闲益智2024-03-06