李春城 姐妹花 a16z最新知悉：这个新址品会“干掉”电影和游戏，跑出新的皮克斯|动画|超等马里奥昆季

李春城 姐妹花

地球上有生命的历史有40亿年，东说念主类在20万年前才出现。20万年关于40亿年来说，不外是短短刹那，但东说念主类在这短短的时候里成为了主管地球的力量。

是什么让东说念主类开脱了其他物种的气运，走上一条新的说念路？

谜底你可能十足思不到：故事。

故事，代表着东说念主类的集体奢睿。尤瓦尔·赫拉利在《东说念主类简史》曾说，虚构的故事像胶水一样把车载斗量的个东说念主、家庭和群体连络在沿途。从古于今，任何大限度东说念主类合营的根基，皆是某种只存在于集体思象中的虚构故事。

到了近代，东说念主类的奢睿通过期候技巧仍然在潜入影响着故事创作。在以前的一个世纪里，许多咱们最爱好的故事皆是由时候变革推动的。

20世纪30年代：迪士尼通过发明多平面录像机，制作了声息同步的全彩动画片，引颈了动画电影的改变，出生了标志性的《白雪公主和七个小矮东说念主》。

20世纪30年代：迪士尼通过发明多平面录像机，制作了声息同步的全彩动画片，引颈了动画电影的改变，出生了标志性的《白雪公主和七个小矮东说念主》。

20世纪40年代：漫威和DC漫画的崛起，收获于四色印刷和胶版印刷时候，这一时期被誉为“漫画黄金时期”，创造了于今仍被识别的“纸浆漫画”作风。

20世纪80年代：皮克斯诓骗野神思和3D图形时候，由Edwin Catmull等东说念主首创了基础的CGI观念，并制作了第一部十足由野神思生成的长片《玩物总动员》，其图形渲染套件Renderman于今仍无为应用于电影制作。

每一次时候翻新，皆会出生新的实质形势。这些新的实质形势最早皆被视为新奇事物，但最终皆成为了新一代创作家主流的实质形势。今天，跟着生成式AI的崛起，实质形势将又一次迎来升级。

具体来说，咱们肯定下个世纪的皮克斯不和会过传统的电影或动画出现，而是通过互动视频。这种新的形势将冲破传统电影和视频游戏的界限，将深度叙事、不雅众的主动性和“游戏”交融在沿途，开辟出一个广袤的新市集。

为什么游戏是更先进的实质形势

目下有两大海浪可能会加快新一代实质创作公司的出生：

1、消费者转向交互式媒体 （而非线性/被迫媒体，举例电视/电影）

2、生成式东说念主工智能推动的时候进步。

在以前 30 年中，咱们看到了消费者的消费民风的诊疗，游戏在每一代东说念主中皆变得越来越受接待。

对Z世代及更年青的一代来说，游戏现在是他们消磨时候的首选方式，越过了电视/电影。2019 年，Netflix CEO里德·哈斯廷斯 (Reed Hastings) 在一封鼓动信中说说念：「咱们与《堡垒之夜》的竞争比与HBO的竞争更热烈。」如今，关于大多数家庭来说，问题已从「咱们在看什么」变成了「咱们在玩什么」。

▲不同世代的消费者每周文娱时候占比漫衍

诚然电视/电影/册本仍然承载着别有洞天的故事，但如今许多新颖且顺利的故事，皆是通过游戏的方式回报的。以哈利波特为例，怒放寰宇扮装上演游戏《霍格沃茨遗产》让玩家以前所未有的千里浸感进入霍格沃茨的寰宇。

这款游戏是2023年最畅销的游戏，首发销售收入越过10亿好意思元，票房越过了除结局《哈利·波特与牺牲圣器（下）》（13亿好意思元）除外的每一部哈利波特电影。

许多游戏 IP 近期在电视/电影改编方面也取得了普遍顺利。顽劣狗的《临了生还者》是 HBO Max 在2023年收视率最高的系列剧，平均每集有 3200 万不雅众。《超等马里奥昆季》电影票房收入高达14亿好意思元，创下了动画电影史上大家首映周末票房最高记载。

此外，还有广受好评的《发射》系列、派拉蒙评价没那么好的《光环》系列、汤姆·霍兰德的《高明海域》电影、迈克尔·贝行将领导的《斯基比迪马桶东说念主》——这个名单还在抓续增多中。

游戏影响力大的一个重要原因是，玩家主动参与有助于培养对故事或寰宇的亲近感。全神灌注玩游戏一小时 > 被迫看电视一小时。许多游戏还有酬酢机制，其中枢设想中内置了多东说念主游戏机制，咱们常常能与身边东说念主共同创造并共享这些牢记的故事。

通过多种方式（不雅看、播放、创作、共享）与一个IP抓续互动，故事就不再只是文娱，而是成为个东说念主身份的一部分。神奇的时刻在于，一个东说念主从「我看哈利波特」诊疗为「我是波特迷」时。后者更为抓久，围绕着蓝本可能是单东说念主参与的行径，构建起身份认可和多玩家社区。

一言以蔽之，诚然咱们历史上的一些最伟大故事皆是通过线性媒体回报的，但畴昔的故事，将在游戏和交互式媒体中进行回报。因此，咱们肯定，下个世纪最紧要的实质公司将在这里建树。

故事与游戏交融后的新契机

鉴于游戏在文化界限的主导地位，咱们肯定，下一个皮克斯将通过一种将讲故事与游戏相连络的媒体形势出现，其中一种有后劲的形势是互动视频。

来源李春城 姐妹花，什么是交互式视频？它与视频游戏有何不同？在视频游戏中，开发东说念主员将一组钞票预加载到游戏引擎中。举例，在《超等马里奥昆季》中，艺术家设想了马里奥扮装、树木和配景，方法员设定马里奥在玩家按下「A」按钮后精准逾越50像素，逾越帧通过传统图形管说念渲染。这导致游戏具有高度详情趣和野心肠的架构，开发东说念主员不错十足按捺游戏。

另一方面，交互式视频十足通过神经集中及时生成帧。除了一组创意教导（不错是文本或代表性图像）外，无需上传或创建任何钞票。AI及时图像模子招揽玩家输入（举例「朝上」按钮），并将概率推断下一个生成的游戏帧。

交互式视频的后劲在于，将电视/电影的易获取性和叙事深度与视频游戏的动态、玩家驱动系统相连络。

通过玩家输入及时生成视频的机制，咱们不错创建个性化、无尽的游戏玩法——有可能未必留下粉丝数千小时，就像那些最佳的玩家驱动类游戏一样。

暴雪的《魔兽寰宇》已有20多年历史，于今仍有约700万订阅用户。互动视频还能杀青多种消费模式——不雅众不错像看电视节目一样靠在沙发上不雅看实质，也不错在迁移拓荒或按捺器上玩游戏。

让粉丝以尽可能多的方式参与他们最心爱的IP寰宇是跨媒体叙事的中枢，这有助于增强对IP的亲和力。在以前十年中，许多故事回报者皆在尝试多样互动视频。

早期的尝试是Telltale推出的《行尸走肉》——一款基于Robert Kirkman漫画系列的电影体验，玩家不错不雅看动画场景，但会在重要时刻通过对话和快速反映事件作念出选用。这些选用——举例在僵尸热切时决定调停哪个扮装——创造了故事更多的可能性，使每次游戏皆具有个性化。

《行尸走肉》于2012年推出，赢得了普遍顺利——赢得了多项年度游戏奖，迄今为止销量越过2800万份。2017年，Netflix也进犯互动视频界限——从《穿靴子的猫：童书历险记》等动画运转，最终推出广受好评的《黑镜：潘达斯奈基》，这是一部真东说念主电影，不雅众不错决定一位年青的方法员何如将一册玄幻演义改编成视频游戏。

《潘达斯奈基》是一部节日热点影片，诱骗了大皆狂热粉丝，他们制作了历程图来记录电影的统共可能结局。

然则，尽管《潘达斯奈基》和《行尸走肉》皆赢得了好评，但它们皆靠近着一个事关生涯的根人道问题——东说念主工创作无数分支故事需要消耗大宗时候和资本。

跟着Telltale膨大到多个形状，他们因「压榨与淘汰」的责任文化而权威扫地，开发东说念主员报怨他们「常常更换和烧钱」。故事质料受到影响——《行尸走肉》一运转在Metacritic上赢得了89分的好评，而4年后，Telltale发布了他们最大的IP之一《蝙蝠侠》，但Metacritic上却只赢得了令东说念主失望的64分。

2018年，Telltale因未能找到可抓续的买卖模式而文书歇业。为了制作《潘达斯奈基》，剧组拍摄了250个视频片断，总长度越过5小时，以对应电影的5个结局。

据报说念，其预算和制作时候是设施《黑镜》剧集的两倍，剧集制作主说念主暗意，该形状的复杂性尽头于「同期制作4集」。最终在2024年，Netflix重组了通盘互动非凡节目部门，转而选用制作传统游戏。到目下为止，互动视频形状的实质资本与游戏时候成线性关系，这是无法幸免的。然则，生成式东说念主工智能模子的进步可能会让互动视频大放异彩。

/ 03 /

视频模子，为互动视频落地创造可能

近期，图像生成模子在蒸馏时候方面取得了令东说念主畏忌的最新进展。

2023年，潜在一致性模子（latent consistency models）和SDXL Turbo的发布，极地面提高了图像生成的速率和遵守。现在，只需一步即可杀青高分辩率渲染，而之前则需要20至30步，资本缩小了30倍以上。AI生成视频的可行性因此大大增多。

本年早些时候，OpenAI发布了Sora，一个未必生成长达1分钟视频并保抓视觉一致性的文本转视频模子，畏忌了寰宇。不久之后，Luma AI发布了速率更快的视频模子Dream Machine，它能在120秒内生成约5秒长的视频，即120帧。

最近Luma共享说，他们在短短7周内就达到了1000万用户。上个月，Hedra Labs发布了Character-1，这是一个专注于扮装的多模态视频模子，能在90秒内生成60秒的视频，展现富饶进展力的东说念主类热沈和配音。

Runway最近推出了Gen-3 Turbo模子，它能在15秒内渲染10秒的视频片断。现在，有抱负的电影制作主说念主不错凭据文本教导或参考图像快速生成几分钟的720p高清视频，这些视频不错与重要帧连络，杀青更高的精准度。

Runway还开发了一套编著器用，为基于扩散模子生成的视频提供更缜密的按捺，包括帧内录像机按捺、帧插值和清醒画笔。Luma和Hedra也将很快发布我方的创作家器用套件。尽料理作责任历程还处于早期阶段，但已有多位实质创作家使用这些器用进行故事创作。

Resemblance AI诓骗Luma、Midjourney和Eleven Labs的时候创作了令东说念主咋舌的3分钟二战另类历史短片《Nexus 1945》。寂寞电影制作主说念主Uncanny Harry与Hedra合营创作了一部赛博一又克短片。创作家们还制作了音乐视频、节目预报片、旅行视频博客，致使快餐汉堡告白。自2022年以来，Runway每年皆会举办一次AI电影节，选出10部在AI匡助下制作的顶级短片。

天然，现在AI还有一些时候限度。比如在叙事质料和按捺方面，教导生成的2分钟裁剪与专科团队制作的2小时故事片之间仍存在很大差距。很难从教导或图像中生成创作家思要的真实实质，即使是告诫丰富的教导工程师粗浅也会丢弃大部分生成的实质。

AI视频创造者Abel Art暗意，约莫需要500个视频才能生成1分钟连贯的视频。图像一致性粗浅在一语气视频一两分钟后运转失效，需要手动编著——这亦然今天大多数生成视频时候限度在约1分钟的原因。

关于大多数专科的好莱坞电影公司来说，扩散模子生成的视频将更多用于前期制作中，以直不雅展示场景或扮装的外不雅，但不可替代现场责任。在后期制作中，AI也有契机用于音频或视觉放胆处理，但与仍是参加数十年的传统责任历程比拟，AI创作器用套件仍处于早期阶段。

短期内，生成视频的最大契机之一在于推动互动视频和短片等新媒体魄式的发展。互动视频仍是细分为1至2分钟的短片断，凭据玩家的选用进行，况且粗浅是动画或作风化的，允许使用分辩率较低的镜头。

更紧要的是，通过扩散模子制作这些短片比Telltale/Bandersnatch更低廉——Abel Art揣度Luma制作1分钟视频的资本为125好意思元，尽头于租用电影镜头一天的用度。尽管如今生成的视频质料可能不领悟，但ReelShort和DramaBox等竖屏短片的流行仍是讲明，不雅众对低制作资本、分集短剧的需求是存在的。

ReelShort凭借数千部大而无当的电视一语气剧，如《禁忌的逸想：阿尔法的爱》，下载量已越过3000万次，每月收入越过1000万好意思元，尽管有月旦指出其照相水平业余、脚本套路化。

交互式视频靠近的最大时候艰苦在于杀青满盈快的帧生成速率以撑抓即时实质创作。目下，Dream Machine每秒约生成1帧。当代游戏主机刊行的最低可招揽设施是领悟在30帧每秒（FPS），而60 FPS则是黄金设施。借助PAB等时候的进步，某些视频类型的帧率可能栽种至10至20 FPS，但仍未达到理思速率。

/ 04 /

互动视频距离真确落地，唯有2年

考虑到现时底层硬件和模子矫正的速率，咱们展望约莫需要两年时候才能杀青买卖上可行的、十足由AI生成的交互式视频。目下，在盘考界限仍是取得了权贵进展，微软盘考院和OpenAI等来源机构正在辛劳于于构建交互式视频的端到端基础模子。

微软的模子专注于以3D形势生成十足"可玩的寰宇"，这将是一个紧要的里程碑，因为它将允许用户在由AI及时生成的环境中进行互动。与此同期，OpenAI展示了Sora模子的演示，这是一个未必"零样本"模拟《我的寰宇》（Minecraft）的突破性时候。Sora模子不仅未必使用基本战术按捺游戏中的玩家，还能以高保真度渲染通盘游戏寰宇非凡动态变化。

在2024年2月，Google DeepMind推出了其创新的端到端交互式视频基础模子——Genie。Genie模子的中枢创新在于其潜在行动模子，这一模子未必识别并剖释视频帧对之间的隐含行动。

经过30万小时的平台视频试验，Genie学会了识别和模拟扮装行动，举例扮装何如跳过拦阻物。这种才能使得Genie不仅未必剖释行动的实施，还未必预测行动的发展。Genie的潜在行动模子与视频鲜艳器相连络，共同输入到一个动态模子中。这个动态模子精采预测并生成下一帧的画面，将单独的帧串联起来，酿成一个连贯的互动视频序列。

在应用层面，多个团队正辛劳于于探索交互式视频体验的新形势。稠密公司正在制作生成式电影或电视节目，这些作品在设想时充分考虑了现存模子的局限性。

此外，一些团队正在将视频元素整合进AI原生游戏引擎中，以创造愈加千里浸式的体验。举例，Ilumine旗下的Latens正在开发一款名为「泄露梦模拟器」的居品，它允许用户在梦乡中行行运及时生成画面，隐微的延长放胆增强了超推行体验的嗅觉。

开源社区Deforum的开发东说念主员也在步履，他们诓骗千里浸式交互式视频时候来创建与推行寰宇相研究的装配。与此同期，Dynamic公司正在开发一款模拟引擎，该引擎使用全生成的视频，让用户未必以第一东说念主称视角按捺机器东说念主，提供了一种全新的交互方式。

在电视和电影产业中，Fable Studio正在开发一项名为Showrunner的AI流媒体职业，它允许粉丝再行混编我方爱好的节目版块。Fable的观念考据作品——《南边公园》的AI版块在首映时就赢得了800万次不雅看，显败露这种新式互动文娱形势的普遍后劲。

同期，Solo Twin和Uncanny Harry等前沿电影制作责任室专注于诓骗AI时候进行创作。Alterverse开发了一款受《龙与地下城》(D&D)启发的交互式视频RPG，剧情走向由社区成员共同决定。Late Night Labs是一家新兴的顶级电影责任室，它将AI时候融入到创作过程中。Odyssey则正在构建一个由四个生成模子驱动的视觉叙事平台。

跟着电影和游戏的界限日益微辞，AI原生游戏引擎和器用的出现为创作家提供了更多的按捺权。Series AI开发的Rho Engine是一个端到端的AI游戏创作平台，该公司正与主要常识产权(IP)抓有者合营开发原创游戏。此外，Rosebud AI、Astrocade和Videogame AI等公司推出的AI创作套件使得即使是编程或艺术界限的生手也能快速上手，制作出互动体验。

这些新的AI创作器用预示着叙事市集的开拓，它们将匡助新一代创作家通过教导工程、视觉草图画图和语音输入的连络，将他们的创意和思象力滚动为推行。

/ 05 /

新一代的皮克斯长什么样？

皮克斯之是以未必成为动画行业的旗舰企业，是因为它顺利地诓骗了野神思和3D图形时候的翻新性变革。如今，生成式东说念主工智能界限正在掀翻一场访佛的时候海浪，预示着新的创意和产业变革。

然则，皮克斯的顺利不单是在于时候，还在于其原创动画电影《玩物总动员》以及由约翰·拉塞特诱导的寰宇级故事回报者团队的创造力。这提醒咱们，时候需要与东说念主类的创造力相连络，才能创作出真确别有洞天的故事。

咱们以为，下一个皮克斯将是一个连络了寰宇一流的互动故事责任室和顶尖时候公司的双重身份的实体。跟着东说念主工智能盘考的快速发展，创意团队必须与AI团队紧密合营，将叙事、游戏设想和时候创新形影相随。

面对这一挑战，新团队需要探索何如让东说念主类回报者与AI器用协同责任，以增强而非放松东说念主类的思象力。同期，还需要科罚与AI生成创意作品关联的法律和伦理拦阻，包括法律统共权、版权保护以及原始作家、艺术家和制作家的酬劳问题。

尽管存在这些挑战，东说念主们对新式互动体验的需求日益增长，这为创意产业带来了普遍的机遇。永恒来看，下一个皮克斯的筹备不仅是创造互动故事，更是创造通盘造谣寰宇，访佛于HBO的《西部寰宇》中所展现的愿景。

借助AI的力量，畴昔咱们可能会先构建一个完满的故事寰宇，然后再凭据特定受众或情境生成千般媒体居品。这将标志着跨媒体叙事的终极演化，冲破传统媒体形势之间的界限，创造出全新的故事寰宇。

正如皮克斯、迪士尼和漫威顺利打造的令东说念主牢记的寰宇一样，下一个互动式皮克斯的机遇在于诓骗生成式AI杀青通常的筹备，构建出前所未有的寰宇，为粉丝提供中枢认可的一部分。

PS：要是你对AI大模子界限有特有的看法李春城 姐妹花，接待扫码加入咱们的大模子疏通群。