字节要用世界模型重做PICO,押注下一代内容入口
字节跳动正在研发实时空间交互式视频生成模型
字节跳动正在研发实时空间交互式视频生成模型。这一模型基于Seedance架构,支持语音与动作输入。目标帧率达到20FPS,延迟控制在0.05秒。
该模型的核心在于实时生成空间交互式视频。Seedance架构为整个系统提供技术基础。语音输入和动作输入让用户能够自然地与生成内容互动。20FPS的帧率确保画面流畅,而0.05秒的低延迟则让交互响应接近即时。
这一技术参数组合指向空间计算方向。字节跳动通过这些指标,试图解决XR设备中内容生成与交互的痛点。模型不只是生成静态画面,而是支持动态、实时的空间视频输出。
PICO头显联动的终端部署计划
字节跳动计划将这一实时空间交互式视频生成模型与PICO头显联动。PICO作为字节旗下的XR硬件产品,成为模型落地的直接载体。
联动意味着模型生成的视频内容将直接在PICO头显上呈现。用户通过头显的显示和传感器,接收语音与动作输入后的实时反馈。硬件与模型的结合,让PICO从单纯的显示设备转向内容生成与交互平台。
这一部署计划将PICO推向下一代内容入口的位置。用户不再依赖预先加载的内容,而是通过模型实时创建或修改空间视频。头显成为入口,用户动作和语音直接驱动内容变化。
组织整合如何支撑空间计算生态
字节跳动在组织层面进行整合,以支撑空间计算生态的构建。这一整合覆盖技术架构、组织结构调整以及资源分配。
从技术架构上看,Seedance模型的研发需要跨团队协作。组织整合确保AI实验室、硬件团队和内容平台之间的无缝对接。字节跳动通过内部资源调动,让不同部门围绕空间计算目标协同工作。
组织整合还体现在对XR业务的重新定位上。PICO团队与模型研发团队的融合,推动硬件与软件的深度绑定。这种整合为空间计算生态提供组织保障,避免技术与产品脱节。
云端与终端协同的实时交互机制
云端与终端协同是实现低延迟空间计算的关键路径。实时空间交互式视频生成模型依赖这一机制运行。
云端承担重计算任务,包括模型推理和视频生成。终端的PICO头显则负责输入采集、轻量处理和最终呈现。0.05秒的延迟目标,正是通过云端高效计算与终端快速响应的协同达成。
协同机制中,语音与动作输入先在终端捕捉,再上传云端处理。生成后的视频帧以低延迟方式回传至头显。20FPS的帧率在这一往返过程中保持稳定。这种云端终端分工,让复杂的世界模型能够在消费级硬件上实现实时交互。
世界模型重做PICO的下一代内容入口定位
字节跳动用世界模型重做PICO,明确押注下一代内容入口。世界模型在这里体现为能够理解并生成空间交互内容的底层架构。
PICO原本是VR头显产品。通过引入实时空间交互式视频生成模型,PICO的定位发生转变。它不再只是内容消费设备,而是成为用户生成和交互空间内容的入口。
这一战略意图清晰:字节跳动希望PICO抓住空间计算时代的入口机会。用户通过语音和动作,在头显中实时创建视频内容。这种入口定位超越传统App商店或视频平台,指向沉浸式、生成式的下一代内容消费方式。
对XR行业格局的意义解析
字节跳动的这一布局对XR行业具有重要意义。它展示了如何通过世界模型构建空间计算生态。
在技术层面,Seedance架构支持的实时生成能力,为XR设备提供新的内容生产方式。20FPS和0.05秒延迟的参数,设定了行业在实时交互视频上的参考标准。
组织整合与云端终端协同的路径,也为其他XR厂商提供借鉴。字节跳动将PICO与模型联动的做法,推动整个行业从硬件竞争转向生态构建。
这一布局最终指向下一代内容入口的争夺。XR不再局限于游戏或视频播放,而是成为用户日常内容创作和交互的主战场。字节跳动的押注,可能加速XR从边缘设备向主流内容平台的转型。
字节跳动通过实时空间交互式视频生成模型,正在重新定义PICO在XR领域的角色。这一从模型到硬件、从技术到组织的完整布局,清晰展现了其在空间计算上的长期意图。
相关阅读
- 原文作者:知识铺
- 原文链接:https://index.zshipu.com/ai/post/20260909/%E5%AD%97%E8%8A%82%E8%A6%81%E7%94%A8%E4%B8%96%E7%95%8C%E6%A8%A1%E5%9E%8B%E9%87%8D%E5%81%9APICO%E6%8A%BC%E6%B3%A8%E4%B8%8B%E4%B8%80%E4%BB%A3%E5%86%85%E5%AE%B9%E5%85%A5%E5%8F%A3/
- 版权声明:本作品采用知识共享署名-非商业性使用-禁止演绎 4.0 国际许可协议进行许可,非商业转载请注明出处(作者,原文链接),商业转载请联系作者获得授权。
- 免责声明:本页面内容均来源于站内编辑发布,部分信息来源互联网,并不意味着本站赞同其观点或者证实其内容的真实性,如涉及版权等问题,请立即联系客服进行更改或删除,保证您的合法权益。转载请注明来源,欢迎对文章中的引用来源进行考证,欢迎指出任何有错误或不够清晰的表达。也可以邮件至 sblig@126.com