ai智能写作软件人工智能智能控制10部人工智能电影

Mark wiens

发布时间:2024-11-20

  在 a16z 看来,以 Sora 为代表的视频天生手艺,能够会改动将来影视与游戏的内容消费流程,以至让影视和游戏交融成为新的内容情势

ai智能写作软件人工智能智能控制10部人工智能电影

  在 a16z 看来,以 Sora 为代表的视频天生手艺,能够会改动将来影视与游戏的内容消费流程,以至让影视和游戏交融成为新的内容情势。

  2024 年 2 月,Google DeepMind 公布了本人的端到端交互式视频根底模子 Genie。Genie 的立异的地方是其潜伏行动模子,该模子可辨认出视频帧对之间的隐含行动。经由过程 30 万小时的平台视频锻炼,Genie 学会了辨认脚色行动 - 比方怎样跳过停滞物。这一潜伏行动模子与视频标识表记标帜器相分离,输入到一个静态模子中,该模子猜测下一帧画面,从而拼接成一段互动视频。

  经由过程多种方法(寓目、播放、创作、分享)连续与一个 IP 互动,故事就不再只是文娱,而是成为小我私家身份的一部门。奇异的时辰在于,一小我私家从「我看哈利波特」改变为「我是波特迷」时。后者更加耐久,环绕着本来多是单人到场的举动,构建起家份认同和多玩家社区。

  为了建造《潘达斯奈基》,剧组拍摄了 250 个视频片断,总长度超越 5 小时,以对应影戏的 5 个终局。据报导,其预算和建造工夫是尺度《黑镜》剧集的两倍ai智能写作软件,剧集建造人暗示,该项目标庞大性相称于「同时建造 4 集」。终极在 2024 年,Netflix 决议封存全部互动出格节目部分,转而挑选建造传统游戏。

  2017 年,Netflix 也进军互动视频范畴——从《穿靴子的猫:童书历险记》等动画开端,终极推出广受好评的《黑镜:潘达斯奈基》,这是一部真人影戏,观众能够决议一名年青的法式员怎样将一本奇异小说改编成视频游戏。《潘达斯奈基》是一部节日热点影片,吸收了多量狂热粉丝,他们建造了流程图来记载影戏的一切能够终局。

  近期在图象天生模子蒸馏的最新停顿使人震动。2023 年,潜伏分歧性模子(latent consistency models)和 SDXL Turbo的公布,极大地进步了图象天生的速率和服从——只需一步便可完成高分辩率衬着,而之前需求 20-30 步,本钱低落了 30 倍以上。天生视频(一系列逐帧变革的分歧图象)的观点忽然变得十分能够。

  明天,我们信赖,新一代的「皮克斯」行将降生。GenAI正在鞭策创意故事叙说方法的底子性改变,让新一代的创作者可以从前所未有的新奇方法报告故事。

  在已往 30 年中,我们看到了消耗者的消耗风俗的改变,游戏/互动媒体在每代人中都变得愈来愈受欢送。关于 Z 世代及更年青的一代来讲,游戏如今是他们消磨工夫的首选方法,超越了电视/影戏。

  有朝一日,借助 AI 的力气,我们大概会先构想一个故事天下——一个我们假想中完好成型的 IP 宇宙,包罗脚色、叙事头绪、视觉元素等——然后再针对特定受众或情境天生所需的各种媒体产物。这将是跨媒体叙事的最终演变,完全恍惚传统媒体情势之间的界线。

  一样,我们以为下一个皮克斯既需求成为天下一流的互动故事事情室,也必需是一家顶尖的手艺公司。鉴于野生智能研讨停顿云云疾速,创意团队需求可以与 AI 团队通力进行,将叙事和游戏设想与手艺立异交融在一同。皮克斯具有一支共同的团队,将艺术与手艺融为一体,并与迪士尼协作。明天的时机是,一个新团队可以将游戏、影戏和野生智能范畴举一反三ai智能写作软件。

  皮克斯、迪士尼和漫威都胜利打造了使人难忘的天下,这些天下成了其粉丝中心认同的一部门。下一个互动式皮克斯的机缘在于操纵天生式 AI 完成一样的目的——缔造新的故事天下,恍惚传统叙事格局的界线,并由此构建出史无前例的宇宙。

  20 世纪 30 年月,迪士尼发清楚明了多平面摄像机,并领先建造了声音同步的全彩动画片——并终极降生了创始性的动画影戏《白雪公主和七个小矮人》。

  AI 视频缔造者 Abel Art 暗示,约 500 个视频才气天生 1 分钟连接的视频。图象分歧性凡是在持续视频一两分钟后开端生效,需求手动编纂——这就是为何明天大大都天生工夫限定在约 1 分钟的缘故原由。

  交互式视频的潜力在于将电视/影戏的易获得性和叙事深度与视频游戏的静态、玩家驱动体系相分离。每一个人都曾经晓得怎样看电视和跟从线性故事。经由过程增加利用玩家输入及时天生的视频,我们能够创立本性化、有限的游戏弄法——有能够可以留住粉丝数千小时,就像那些最好的玩家驱动游戏一样。暴雪的《魔兽天下》已有 20 多年汗青,至今仍有约 700 万定阅用户。

  但是,明天一样不言而喻的是,人们对新的互动体验有着宏大的需求。从久远来看,下一个皮克斯不只能够缔造互动故事,还能够缔造全部假造天下。我们之前讨论过永不结束游戏的能够性——分离及时关卡天生、本性化叙事和智能代办署理的静态天下,相似于 HBO 的《西部天下》的愿景。互动视频处理了将《西部天下》变成理想的一大应战——即兴创作大批本性化、高质量、互动性强的内容。

  在视频游戏中,开辟职员将一组资产预加载到游戏引擎中。比方,在《超等马里奥兄弟》中,艺术家设想了马里奥脚色、树木和布景,法式员设定马里奥在玩家按下「A」按钮后准确腾跃 50 像素,腾跃帧经由过程传统图形管道衬着。这招致游戏具有高度肯定性和计较性的架构,开辟职员能够完整掌握游戏。

  短时间内,天生视频的最大时机之一在于鞭策互动视频和短片等新媒体魄式的开展。互动视频曾经细分为 1-2 分钟的短片断,按照玩家的挑选停止ai智能写作软件,而且凡是是动画或气势派头化的,许可利用分辩率较低的镜头。更主要的是,经由过程 diffusion model 建造这些短片比 Telltale /Bandersnatch 更自制——Abel Art 估量 Luma 建造 1 分钟视频的本钱为 125 美圆,相称于租用影戏镜头一天的用度。

  同时,Rosebud AI、Astrocade 及 Videogame AI 等推出的 AI 创作套件,让编程或艺术范畴的新手也能疾速上手,建造互动体验。

  到今朝为止,互动视频项目标内容本钱与游戏工夫成线性干系,这是没法制止的。但是,天生式野生智能模子的前进能够会让互动视频大范围阐扬感化。

  皮克斯可以操纵计较机和 3D 图形范畴的底子性手艺变化,打造出一个旗舰企业。现在,天生式野生智能范畴也掀起了相似的海潮。但是,一样主要的是要记着,皮克斯的胜利很大水平上要归功于《玩具总发动》和约翰·拉塞特指导的天下级故事报告者团队创作的原创动画影戏。人类的缔造力操纵新手艺创作出了最出色的故事。

  但是,虽然《潘达斯奈基》和《行尸走肉》都得到了好评,但它们都面对着一个事关保存的底子性成绩——野生创作无数分支故事需求消耗大批工夫和本钱。跟着 Telltale 扩大到多个项目,他们因「压榨与裁减」的事情文明而身败名裂,开辟职员埋怨他们「频仍改换和烧钱」。故事质量遭到影响——《行尸走肉》一开端在 Metacritic 上得到了 89 分的好评,而 4 年后,Telltale 公布了他们最大的 IP 之一《蝙蝠侠》,但 Metacritic 上却只得到了使人绝望的 64 分。2018 年,Telltale 因未能找到可连续的贸易形式而颁布发表停业。

  总而言之,固然我们汗青上的一些最巨大的故事都是经由过程线性媒体报告的,但将来的故事,将在游戏和交互式媒体中停止报告。

  Ilumine 旗下的 Latens 正在开辟一款「苏醒梦模仿器」,用户在黑甜乡中行走时能够及时天生画面。这类细微的提早有助于营建一种超理想的体验。开源社区 Deforum 的开辟职员正在利用沉醉式交互式视频创立理想天下的安装。Dynamic 正在开辟一款模仿引擎,用户能够利用全天生的视频以第一人称视角掌握机械人。

  跟着影戏和游戏之间的界线变得恍惚,我们将看到 AI 原生游戏引擎和东西的呈现,为创作者供给更多掌握权。Series AI 开辟了 Rho Engine,这是一个用于 AI 游戏创作的端到端平台,并正在操纵其平台与次要 IP 持有者协作打造原创游戏。

  不久以后,Luma AI 公布了速率更快的视频模子Dream Machine,能够在 120 秒内天生 120 帧(约 5 秒的视频)。Luma 近来分享说,他们在短短 7 周内就到达了惊人的 1000 万用户。上个月,Hedra Labs 公布了 Character-1,这是一个专注于脚色的多模态视频模子,能够在 90 秒内天生 60 秒的视频,具有富有表示力的人类感情和配音(SenseAI 此前在这篇文章中引见了 Hedra,《》)。而 Runway 近来推出了Gen-3 Turbo 模子,这个模子能够在 15 秒内衬着 10 秒的视频片断。

  需求明白的是,这将是一个应战——并且这不单单遭到手艺的限定——这个团队需求找到新的方法,让人类报告者能与 AI 东西协同事情,以加强而非减弱其设想力。另有很多法令和伦理停滞需求处理——今朝,除非创作者能证实其具有效于锻炼模子的所无数据,不然 AI 天生创意作品的法令一切权和版权庇护尚不明了。关于锻炼数据背后原始的作者、艺术家及建造者的报答成绩,仍有待处理。

  详细而言ai智能写作软件,我们以为下个世纪的皮克斯不会经由过程传统影戏或动画呈现,而是经由过程互动视频。这类新的故事叙说情势将恍惚视频游戏与电视/影戏之间的界线——将深度故事叙说与观众主体性和「游戏」交融在一同,开拓一个宽广的新市场。

  但是,要认可当前的一些手艺限定,在叙事质量和掌握方面,提醒天生的 2 分钟剪辑与专业团队建造的 2 小时故事片之间仍旧存在很大差异。很难从提醒或图象中天生创作者想要的切当内容,即便是经历丰硕的提醒工程师凡是也会抛弃他们天生的大部分内容。

  许多游戏 IP 近期在电视/影戏改编方面也获得了宏大胜利。淘气狗的《最初生还者》是 HBO Max 2023 年收视率最高的系列剧,均匀每集有 3200 万观众。《超等马里奥兄弟》影戏票房支出高达 14 亿美圆,创下了动画影戏史上环球首映周末票房最高记载。别的另有广受好评的《辐射》系列、派拉蒙评价没那末好的《光环》系列、汤姆·霍兰德的《奥秘海疆》影戏、迈克尔·贝行将指点的《斯基比迪马桶人》——这个名单还在连续增长中。

  虽然现在天生的视频质量能够不不变,但 ReelShort 和 DramaBox 等竖屏短片的盛行曾经证实,观众对低建造本钱、分集短剧的需求是存在的。凭仗数千部短小干练的电视持续剧(如《忌讳的愿望:阿尔法的爱》),ReelShort 的下载量已超越 3000 万次,每个月支出超越 1000 万美圆,虽然有攻讦指出其拍照程度专业、脚本套路化。

  思索到底层硬件和模子改良的速率,我们估量能够还需求约 2 年的工夫才气完成贸易上可行的、完整天生的交互式视频。

  本年早些时分,OpenAI 公布了Sora,震动了天下。Sora 是一个文本转视频的模子,能够天生长达 1 分钟的视频,同时连结视觉分歧性。

  在使用层,我们曾经看到一些团队正在探究新情势的交互式视频体验。很多公司正在建造天生式影戏或电视节目,环绕当前模子的范围性停止设想。

  2019 年,Netflix CEO 里德·哈斯廷斯 (Reed Hastings) 在一封股东信中说道:「我们与《碉堡之夜》的合作(和输给)比与 HBO 的合作更剧烈。」

  关于现今大大都专业的好莱坞影戏公司来讲,分散模子天生的视频能够在前期建造顶用于故事板(Storyboard),以直观地展现场景或脚色的表面,但不克不及替换现场事情。前期建造中,也有时机利用 AI 停止音频或视觉结果 处置,但整体而言,与曾经投入数十年的传统事情流程比拟,AI 创作东西套件仍处于晚期阶段。

  固然电视/影戏/册本仍旧承载着令人着迷的故事,但现在很多新奇且胜利的故事,都是经由过程游戏的方法报告的。以哈利波特为例,开放天下脚色饰演游戏《霍格沃茨遗产》让玩家从前所未有的沉醉感进入霍格沃茨的天下。这款游戏是 2023 年最脱销的游戏,首发贩卖支出超越 10 亿美圆,票房超越了除终局《哈利·波特与灭亡圣器(下)》(13 亿美圆)以外的每部哈利波特影戏。

  另外一方面,交互式视频完整经由过程神经收集及时天生帧。除一组创意提醒(可所以文本或代表性图象)外,无需上传或创立任何资产。及时 AI 图象模子领受玩家输入(比方「向上」按钮),并将几率揣度下一个天生的游戏帧。

  交互式视频面对的最大手艺困难在于,完成充足快的帧天生速率以撑持立即内容创作。今朝,Dream Machine 每秒约天生 1 帧。当代游戏主机刊行的最低可承受尺度是不变在 30 帧每秒(FPS),而 60 FPS 则是黄金尺度野生智能智能掌握。借助 PAB 等手艺的前进,某些视频范例的帧率能够提拔至 10-20 FPS,但仍未到达幻想速率。

  一样,皮克斯在 20 世纪 80 年月也占有了共同的职位,充实操纵了新手艺平台——计较机和 3D 图形野生智能智能掌握。结合开创人 Edwin Catmull 是纽约理工学院计较机图形尝试室和卢卡斯影业(Lucasfilm)的晚期研讨员,创始了根底 CGI 观点,厥后建造了第一部完整由计较机天生的长片《玩具总发动》。皮克斯出名的图形衬着套件 Renderman,迄今已在 500 多部影戏中获得使用。

  互动媒体之以是云云有影响力的一个枢纽缘故原由是,自动到场有助于培育对故事或天下的接近感。聚精会神玩游戏一小时 被动看电视一小时。很多游戏另有交际机制,其中心设想中内置了多人游戏机制,最难忘的故事,常常是我们与身旁人配合缔造并分享的那些。

  这些新的 AI 创作套件将开辟叙事市场——使新一代创作者可以经由过程提醒工程、视觉草图绘制和语音输入的分离,将他们的设想力变成理想。

  现在,我们看到研讨方面获得了停顿,微软研讨院和 OpenAI 等机构正在勤奋为交互式视频构建端到真个根底模子。微软的模子旨在以 3D 情势天生完整「可玩的天下」。OpenAI 展现了一个 Sora 演示,此中该模子可以「零样本」模仿 Minecraft,「Sora 能够同时利用根本战略掌握 Minecraft 中的玩家,同时以高保真度衬着天下及其静态野生智能智能掌握。」

  在每次的手艺海潮中,晚期的原型都被看成别致事物,厥后成为新一代创作者引领的创作故事的新情势。

  现在,有理想的影戏建造人能够按照文本提醒或参考图象快速天生几分钟的 720p 高清视频,这些视频能够与肇端或完毕的枢纽帧分离,以完成更高的准确度。Runway 也开辟了一套编纂东西,能够对基于分散模子天生的视频供给更精密的掌握,包罗帧内摄像机掌握、帧插值和活动画笔(视频的动画部门)。Luma 和 Hedra 也将很快公布本人的创作者东西套件。

  在电视/影戏范畴,Fable Studio 正在开辟 Showrunner,这是一项 AI 流媒体效劳,可以让粉丝从头从头混编本人喜欢的节目标版本野生智能智能掌握。客岁炎天,Fable 的观点考证作品《北方公园》AI 客岁炎天首映即得到 800 万次寓目ai智能写作软件。

  Solo Twin 和 Uncanny Harry 都是专注于 AI 的前沿影戏建造事情室。Alterverse 构建了一款受 D&D 启示的交互式视频 RPG ,由社区决议下一步的剧情走向。Late Night Labs 是一家新的一流影戏事情室,将 AI 融入创作历程。Odyssey 正在 构建一个由 4 个天生模子驱动的视觉叙事平台。

  互动视频还能完成多种消耗形式——观众能够像看电视节目一样靠在沙发上寓目内容,也能够在挪动装备或掌握器上玩游戏。让粉丝以尽能够多的方法到场他们最喜好的 IP 天下是跨媒体叙事的中心,这有助于加强对 IP 的亲和力。

  固然建造事情流程还处于晚期阶段,但我们曾经碰到了几位利用这些东西创作故事的内容创作者。Resemblance AI 创作了 Nexus 1945,这是一部使人惊讶的 3 分钟二战另类汗青短频,交融了 Luma、Midjourney 和 Eleven Labs 的手艺。自力影戏建造人 Uncanny Harry 与 Hedra 协作创作了一部赛博朋克短片。创作者们建造了音乐视频、节目预报片、游览视频博客野生智能智能掌握,以至另有快餐汉堡告白。自 2022 年以来,Runway 每一年城市举行一次 AI 影戏节,选出 10 部在 AI 协助下建造的顶级短片。

  漫威和 DC 漫画在 20 世纪 40 年月申明鹊起,这一期间被称为「漫画黄金时期」,这得益于四色印刷和胶版印刷的提高,可用于大范围印刷漫画。该手艺的范围性——低分辩率、有限的色彩范畴、在便宜消息纸长进行基于点的印刷——缔造了我们至今仍能辨认的标记性「纸浆漫画」的表面。

  鉴于游戏在文明范畴的主导职位,我们信赖,下一个皮克斯将经由过程一种将讲故事与游戏相分离的媒体情势呈现,此中一种有潜力的情势是互动视频。

  故事是人类体验天下的中心——我们经由过程故事来了解天下、追求意义并与别人成立联络。在已往的一个世纪里,我们最喜欢的很多故事都是经由过程手艺变化完成的。

  在已往十年中,很多故事报告者都在测验考试各类互动视频。晚期的打破是 Telltale 的《行尸走肉》——一款基于 Robert Kirkman 漫画系列的影戏体验,玩家能够寓目动画场景,但会在枢纽时辰经由过程对话和快速反响变乱做出挑选。这些挑选——比方在僵尸打击时决议救济哪一个脚色——缔造了故事情体,使每次游戏都具有本性化。《行尸走肉》于 2012 年推出,得到了宏大胜利——博得了多项年度游戏奖,迄今为止销量超越 2800 万份。

免责声明:本站所有信息均搜集自互联网,并不代表本站观点,本站不对其真实合法性负责。如有信息侵犯了您的权益,请告知,本站将立刻处理。联系QQ:1640731186