30天完成工程攻坚：实时世界模型管线落地 TPU
2026年10月15日，Google Cloud 官方博客发布技术文章披露，生成式 AI 初创公司 Visko 与 Google Cloud TPU 工程师团队在2026年8月开启合作，历时30天将 Visko 的多模态实时推理管线部署到了单一 Cloud TPU 切片上。
根据双方披露的数据，该端到端管线在 TPU 上的渲染速度达到播放速度的 1.07 倍，成功实现了实时运行。Visko 的旗舰模型 Orbis 支持从单一文本或图像提示词开始持续生成实时视频流，观众还能在播放过程中实时输入新提示词动态引导场景演变，无需重启或打断连续性。
Google Cloud AI 开发者布道师负责人 Dave Elliott 表示，Visko 借助 JAX、torchax 和自定义 Pallas 内核在单一 TPU 切片上共同设计其实时多模态管线，证明了初创团队能快速在 Google Cloud 的 AI Hypercomputer 上实现 1.07 倍播放速度的渲染。
攻克严苛时延限制：模型串联运行与部署规格差异
与可离线排队的传统视频生成不同，实时世界模型面临严格的截止时间难题，每一个视频块和同步音频都必须在观众看完前一个块之前完成渲染，否则就会发生卡顿。
此外，实时管线还面临两大结构性限制：一方面，每个直播流对应独立观众会话，批处理大小必须为一，无法通过合并并发请求来掩盖延迟；另一方面，视频模型维护着滚动记忆，视频块严格依赖前一块，无法乱序预渲染或跨未来时戳并行。
为确保基础设施精简与成本效益，该管线被设计为在单一 Cloud TPU 切片上以 BF16 精度串联运行核心视频扩散模型、超分辨率放大器和音频生成器三个独立模型，底层软件栈建立在 JAX、torchax 与自定义 Pallas 内核之上。
在具体规格上，实际部署环境与官方宣传存在一定差异。在 Google Cloud 的 TPU 部署管线中，视频块被放大至 1664x936 分辨率（18 fps）并配以同步音频；而 Visko 官方此前公告宣称 Orbis 1.0 能实时输出 4K 分辨率、24 fps 的视频。
初创团队背景与多元应用前景
Visko 成立于2025年，总部位于加州桑尼维尔，由前 Apple 研究员 Qing 'Will' Yin 创立，团队规模约16人。其顾问团队包括加州大学伯克利分校的 Michael I. Jordan、哥伦比亚大学的 Steve WaiChing Sun 以及纽约大学的 Mengye Ren。
2026年9月1日，Visko 宣布完成由 Llama Ventures 领投的 1000 万美元 Pre-seed 轮融资，并开放了 Orbis 1.0 的公众访问权限。该模型结合了潜在世界模型，在推理中评估潜在未来状态，引导生成结果呈现符合物理规律的运动与物体行为。
据 Visko 方面介绍，这类支持实时交互的流式世界模型，正在为互动娱乐、直播电商、AI 伴侣、沉浸式教育和机器人模拟等应用场景解锁新的可能性。