Sora 的工作原理,来自 OpenAI 的新 AI 可以制作奥斯卡级视频

我们已经知道OpenAI聊天机器人无需学习法律即可通过律师资格考试。现在,恰逢奥斯卡颁奖典礼,人工智能公司Sora推出了一款新应用程序,承诺无需参加电影制作课程即可制作出与电影一样好的视频。Sora目前只是一个研究产品,将提供给一组创建者和安全专家来检查其漏洞。OpenAI 计划在尚未确定的日期向所有有抱负的电影制作人提供该应用程序,但仍决定将该应用程序作为预览版提供。

从谷歌等巨头Runway等初创公司,多家公司已经推出了文本到视频的人工智能项目,能够根据用户的文本指令创建视频。但 OpenAI 表示,Sora 凭借其惊人的真实感(我个人在其竞争对手中没有遇到过)以及制作更长视频(可持续长达一分钟)的能力,在该领域的其他应用程序中脱颖而出与我交谈的研究人员并未透露制作视频的确切时间,但他们表示,这更接近于外出吃饭所需的时间,而不是几天。

索拉可以做什么

OpenAI 不允许我向 Sora 提交请求,但它确实分享了四个示例,展示了其新 AI 的潜力(不过,没有一个长度接近一分钟,最长为 17 秒)。第一个来自一个听起来像是痴迷的编剧写的详细提示:“宏伟的白雪皑皑的东京很热闹。镜头穿过城市拥挤的街道,跟随几个人在附近享受雪和购物摊位。美丽的樱花花瓣随着雪花在风中飞舞。”


其结果是一部令人信服的电影,背景设定在一个非常知名的东京,在一年中雪花和樱花共存的神奇时刻。虚拟摄像机的移动就像连接到无人机上一样,跟随一对缓慢漫步的情侣。其中一名路人戴着口罩。在他们的左边,汽车在河边的道路上呼啸而过,而在右边,顾客进出一系列小商店。

该视频并不完美多次观看视频,您会意识到,如果虚拟摄像机继续滚动,主角(一对走在积雪的人行道上的夫妇)会发现自己面临困境。两人走的人行道似乎是死胡同,必须翻过一道小护栏,才能到达右侧一个陌生的人行横道。尽管存在这些小小的不便,但东京的例子代表了世界建设的一次非凡实践未来,制作设计师将分为两派,一派认为此类工具是强大的帮助,另一派则将其视为对职业的生存威胁。该视频中描绘的人物完全由数字神经网络生成,没有特写镜头,也没有发出任何声音。但索拉的团队表示,在其他情况下,镜头中的虚拟演员表现出了真实的情感。


OpenAI 分享的其他片段也值得注意。最重要的是,根据提示请求“一个毛茸茸的小怪物跪在红蜡烛旁边的动画场景”而创建的一个脱颖而出,其中添加了一些详细的说明(“睁大眼睛,张开嘴巴”)和对所需气氛的描述。索拉创造了一种皮克斯风格的生物,它似乎融合了菲比、小魔怪和《怪兽电力公司》中苏利的 DNA。特别是关于最后一部电影,我记得皮克斯在上映时谈论了很多关于渲染移动怪物的皮毛的非常复杂的纹理是多么困难。电影公司的魔术师花了几个月的时间才取得成功。“[Sora]学习 3D 几何和连贯性– 该项目研究员 Tim Brooks 解释道– 我们没有插入它们,它们是通过查看大量数据自行出现的。”



推荐推门
搜索
标签
«    2024年5月    »
12345
6789101112
13141516171819
20212223242526
2728293031
网站分类
文章归档
 
Copyright © 2021张少学习分享网 All Rights Reserved 黔ICP备2021004591号