Runway WorldPrompt 与实时交互世界的工程实现

Runway 的 GWM Worlds 2 研究预览通过 WorldPrompt，让用户设定模拟环境并创建可实时提示的时间戳事件。它以连续 720p、24 fps 视频和 48,000 Hz 音频呈现交互世界，模型经过 WorldPrompt 微调、自回归后训练和蒸馏。文章还讨论了误差累积、上下文管理和长期记忆等挑战，以及用模拟环境测试 Agent 和机器人等用途。