周鸿祎称Sora生成视频堪比CG:未做3D建模 只需文字就可逼真描绘
文字侠客
2024-05-13 15:15:20
0

周鸿祎表示,Sora是记录文生视频AIGC的工具,它反映了AI对世界的理解。

快科技2月18日消息,今日,周鸿祎再次谈到Sora视频模型,他表示Sora生成视频堪比CG。

周鸿祎称Sora生成视频堪比CG:未做3D建模 只需文字就可逼真描绘

周鸿祎发视频称,Sora有三个片段让他觉得非常惊讶。其中一个是一堆金毛小狗在雪地里打滚儿,狗狗用鼻子拱雪,甚至一粒一粒的雪粒都能感觉到,他感觉这个画面非常真实。

周鸿祎称Sora生成视频堪比CG:未做3D建模 只需文字就可逼真描绘

他认为,对比Pika和Runway是做不出这样效果的。Pika和Runbway实际上是基于图形图像本身的操作来进行生成。只是形成一种比较简单的计算机动画的效果。

周鸿祎说:“即使是用常规呢计算机CG电影工业特效来看这三个画面,那也会非常难做,但是到了Sora这里,这些细节都会变得非常简单,只要给出一些文字的提示要求,就能逼真描绘出来”。

他认为,Sora是没有做3D建模的。如果Sora也只是用3D建模再进行渲染,那么这和传统的电影工业走的是一样的路,这样就不具备颠覆性和革命性了。

周鸿祎猜测Sora做到如此效果有三点原因:

1、Sora模拟了人类观察、描绘、表现世界的方法。如果人类画师用笔画出来这三个场景,人类的大脑里不需要3D建模,因为人类对世界有基本认知。人类可以随意想象出自己要做的事,可以控制自己所想。

周鸿祎称Sora生成视频堪比CG:未做3D建模 只需文字就可逼真描绘

2、Sora在学习的过程中,用了很多视频、电影的内容来作为训练输入。当输入一些画面,不仅要解读出画面的元素,还要解读出一些物理定律。

openAI的论文中曾提到recaptioning技术,意思是对每一帧画面都能够用文字来描述。这点也正符合人类认知世界的方法。

周鸿祎称Sora生成视频堪比CG:未做3D建模 只需文字就可逼真描绘

3、openAI产生了很多3D内容。不排除它用现在游戏引擎做了很多实时3D模型的渲染,再利用这些3D模型把更多的物理知识训练给Sora。

周鸿祎表示,Sora是记录文生视频AIGC的工具,它反映了AI对世界的理解,是从文字进入图像,再从图像展示对这个世界3D模型的理解。

相关内容

周鸿祎称Sora生成视频堪...
周鸿祎表示,Sora是记录文生视频AIGC的工具,它反映了AI对世...
2024-05-13 15:15:20

热门资讯

王毅:中国愿做应对热点问题的稳...   慕尼黑2月18日电 当地时间2月17日,中共中央政治局委员、外交部长王毅出席慕尼黑安全会议,在“...
永清环保签订42亿元分布式屋顶... 3月14日晚,永清环保(300187)公告,近日与桂林市越盛新能源有限公司签订《广西桂林平乐县二期1...
协鑫科技早盘持续上涨超7% 交... 协鑫科技(03800)早盘涨幅持续扩大,上涨7.25%,现报1.48港元,成交额3.14亿港元。交银...
#华为苹果发布会在同一天# 华... #华为苹果发布会在同一天# 华为官方宣布,将于9月10日14:30举行华为见非凡品牌盛典及鸿蒙智行新...
星纪魅族 Flyme Auto... 2024 年 8 月 1 日,星纪魅族联合领克、亿咖通科技,在杭州举办 Lynk X 领克 Z10 ...
电影《热辣滚烫》大年初一预售票...   2月8日,据灯塔专业版实时数据,春节档新片《热辣滚烫》大年初一预售票房突破1亿元。
黄金价格屡创新高!机构最新研判   龙年春节之后,黄金价格拾级而上,3月国际黄金价格加速上涨并屡创新高,引发市场广泛关注。Wind数...
兰州高新区加速算力布局 “飞天...   兰州2月4日电 (刘延新)近日,从兰州高新区传来消息,总投资约14亿元、规划425P人工智能算力...
康为世纪最新公告:拟推不超过股... 康为世纪发布2024年限制性股票激励计划,本激励计划拟向激励对象授予的第二类限制性股票数量不超过36...
中国在南极建“新家”有哪些挑战... 在遥远的南极罗斯海恩克斯堡岛,此时此刻,罗斯海新站的建设者们正在忙着“盖新房”。我国在南极的第五座科...