Noiz AI / HKUST / 独立收录记录

Helix World

Helix World 由 Noiz AI 与香港科技大学介绍,从图像出发,在用户移动和转动视角时生成后续画面与匹配声音。

视频与传感模拟最近一次技术来源阅读于 2026-10-202 份原始材料

技术资料

能做什么,使用时要注意什么。

输入与结果

提供什么
起始图像、用户相机运动与键盘动作。
得到什么
分块生成的场景视频及匹配的空间立体声音频。
动作的作用
预测以动作为条件。

开放情况与使用边界

开放声明
开放权重

开放情况是所引材料中的声明;当前访问方式与服务状态请以官方页面为准。开放权重不等于开源。

材料说明的限制

实时速度报告基于 NVIDIA H800;尚未报告消费级 GPU 表现,公开 checkpoint 属于预览版本。

资料尚未确认
开源情况需要区分的对象已收录材料不足以判断,未确认不代表没有相应能力。

分类与用途

本站根据所引材料归纳的检索标签。标签可以重叠,不表示能力验证;未知不表示不支持。

模型类型
  • 视频与传感模拟生成视频序列或未来传感器观测;具体控制方式另行说明。
控制方式
  • 相机位姿 / 轨迹以相机位姿或轨迹控制观察视角。
  • 导航动作以导航输入影响生成环境中的后续观察。
应用领域
  • 应用领域未知目前保留的材料尚不足以指定应用领域。

限定 HelixWorld 论文及 Helix World 预览;生成的视听环境不等于可编辑的三维场景资产。

分类依据

相关动态

按事件时间展示已收录进展,非完整新闻列表。

本项目 · 技术介绍

Helix World 介绍可交互的同步视听生成

官方介绍从单张图像出发,根据相机运动与键盘动作,同步生成后续视频和空间立体声的 Helix World 预览。

这是10月12日的官方介绍;论文v1为9月29日。生成视听画面不等于输出可编辑三维资产,预览不代表已在本站运行。

阅读原始材料 ↗

来源与原文

按原始材料集中查阅;相同原句合并展示,对应资料与阅读日期一并保留。

Helix World · 项目原始材料

noiz.ai

核对原文摘录 · 4 段,支持 6 项资料
原阅读方向 / 一句话认识 / 输出什么

阅读于 2026-10-20

Helix World is a world model that generates an explorable scene and its spatial stereo soundtrack together, conditioned on the user's camera motion and keyboard actions.
输入什么

阅读于 2026-10-20

You start from a single image, move with WASD and look around with the arrow keys.
动作是否影响预测

阅读于 2026-10-20

conditioned on the user's camera motion and keyboard actions.
材料说明的限制

阅读于 2026-10-20

Real-time speed is reported on an NVIDIA H800 data-center GPU; the paper does not report consumer GPUs.

背景资料阅读于 2026-10-20

Helix World · 项目原始材料

huggingface.co

核对原文摘录 · 1 段,支持 1 项资料
来源中的开放声明

阅读于 2026-10-20

model.safetensors

背景资料阅读于 2026-10-20

本站整理来源中的声明,不核查厂商声明真伪,不评价模型优劣。了解收录方式 →