PixVerse R2 real-time world model lets users walk into generated worlds
PixVerse R2 is a real-time world model where users can walk into and control generated worlds and rewrite scenes and plot in natural language, with an interactive demo on the site.
如果 AI 生成的视频不再是一段“等待几十秒后被动观看的静态片段”，而是一个在你眼前实时运转、能走进去、甚至能用语言随时重塑的数字世界，娱乐的形态会变成什么样？ 体验完 PixVerse R2 之后，我觉得我们处于这样一个临界点：AI 视频模型即将从视频工具，演变为造梦空间。 为什么这么说？ PixVerse R2 是实时世界模型，他生成的世界，你可以实时走入、操控、并通过自然语言实时改变画面和剧情。当我们把实时生成与用户控制结合在一起时，几个科幻的场景就逐渐变得可能： · 从“看电影”到“活在电影里”： 传统影视的叙事是单向且固定的，即便是互动电影，也受限于预先录制好的分支树。但当视频具备实时生成能力，世上将不再有两段完全一样的剧情。每一个玩家的选择，都是现场为自己“拍摄”的独一无二的视听电影。 · 语言成为了最强大的游戏手柄： 以往的游戏需要开发者提前写好所有逻辑、建模和物理规则。而在实时世界模型中，你的自然语言就是控制信号，你可以一边漫游，一边用意念般的文字改变场景氛围、召唤工具或让角色做出反应。 · “可游玩的梦境”与无限内容宇宙： AI 模糊了游戏、影视与虚拟现实的边界。未来的娱乐产品或许不再有“通关”和“终点”，只要你或 AI 的想象力在延伸，这个实时运算的世界就会无止境地在你脚下铺展开来。 PixVerse 官网上现在就有这种全新娱乐形态的雏形Demo，其中我最推荐Storie里的ZERO MARK，是结合了互动影视、游戏、虚拟人的全新的娱乐形态，剧情是典型的莫欺少年穷爽剧剧情：主角魔力检测时的魔力数值为0，实际是因为他的魔力属性是隐藏属性，被同学嘲笑和坑害，最后获得力量反杀的剧情。 Demo里集合了这几种元素： 1、电影。故事的主体部分是由电影视频组成，推动剧情前进； 2、互动游戏和实时视频生成。在剧情关键节点，你可以选择剧情或者输入剧情，实时生成剧情视频； 3、由实时视频支撑的实时场景探索。剧情里人物变成了小树人，进入了可以自由探索的3D空间，你可以操作人物在场景里自由行走，整个场景不是提前搭建的，也是由视频实时生成的； 4、实时对话的虚拟人。可以跟剧情里出现的角色实时对话，虚拟人的画面、音频也都是实时生成的； 5、游戏的QTE元素。一些实时操控的游戏玩法，目前对剧情进展没有影响，但是以后模型进一步提升速度，也许游戏过程也能改变剧情进展。 在线体验：https://t.co/lXDQ1zIxBH #PixVerseWorldModel @PixVerse