它石智航 WIYH 数据集正式开源：全球首个具身 VLTA 多模态数据，加速具身智能真实世界落地 - 中国日报网
China Daily Homepage
中文网首页
时评
资讯
C财经
生活
视频
专栏
双语
-->
原创
观天下
地方
-->
登录
注册
移动新媒体
站内搜索
站内搜索
China Daily Homepage
中文网首页
时评
资讯
C财经
生活
视频
专栏
双语
-->
漫画
原创
观天下
地方
它石智航 WIYH 数据集正式开源：全球首个具身 VLTA 多模态数据，加速具身智能真实世界落地
来源：中国日报网 <br/> 2025-12-29 14:42
来源：
中国日报网
-->
2025-12-29 14:42
分享
分享到
分享到微信
-->
关闭
引语：在具身智能领域，数据是智能的最重要燃料，它石智航正成为“为众人抱薪者”。
12 月 26 日，它石智航重磅开源了全球首个大规模真实世界具身 VLTA（Vision-Language-Tactile-Action）多模态数据集 ——World In Your Hands（简称 “WIYH 数据集”）。该数据集首次亮相于今年 10 月，并在刚刚结束的它石智航技术首秀发布上，作为「超级算法」中的核心成果之一得到行业广泛认可。首秀现场展示的世界首台可人工刺绣机器人等成果，其丝滑动作背后的核心正是基于 WIYH 数据集训练的AWE2.0模型。
WIYH 数据集通过首创 “Human-centric”（以人为中心）的数据采集新范式，破解了遥操作数据采集规模化成本高、仿真数据在 sim2real 时存在 GAP，难以丝滑迁移到现实世界的痛点，填补了具身智能所需的高质量、可泛化、大规模真实世界数据的空白，为具身基座模型实现 Scaling Law 提供了关键语料。要知道，当前具身智能所需数据量与现有储备之间至少相差两个数量级，WIYH的开源正为填补这一鸿沟提供了核心解法，加速了具身智能落地真实世界的进程。
在 Human-centric 采集范式下形成的 WIYH 数据集，具备了真实可靠、丰富多元、全面多模态、规模化等特征，并拥有海量数据：包含超过10万条以上的真实人类操作视频、40余种任务类型、100多种人类技能，覆盖了含520 余种真实物品，真实还原商超、酒店、餐饮、工业、办公、家居等多行业的10种核心场景全链路任务，数据将分批次释放。WIYH是业内最大的Human-centric数据集，且仍在不断扩展和丰富中。
场景和任务分布
各场景技能分布
物体和技能词云
采集了丰富的数据之后，行业还面临数据迁移这另一核心难题，为此它石构建了 TARS Datacore 具身数据引擎。作为云端大模型，它实现了全流程的自动化标注，将原始视频转化为机器人能理解的“教科书”。这套标注体系不仅涵盖了标定、深度、动作、指令、思维链 (COT)、掩码（Mask）和触觉（Tactile）等基础信息，更通过以下三类精准标注，形成了从感知到动作的全链路闭环：
原子任务标注：理解“做什么”。将复杂动作拆解为“抓取、移动、放置”等不可再细分的逻辑单元，并配以自然语言指令，让机器人明白长流程任务的操作顺序与步骤内涵；<br/> <br/> <br/>图像感知标注：看清“在哪里”。通过云端语义模型给每个物体打上清晰的边界标签（掩码），并利用 3D 视觉技术计算画面中物与人的深度距离，赋予机器人精准的空间感，使其能理解物体的边界与远近；<br/> <br/> <br/>视觉语言标注：思考“为什么”。这是最关键的“大脑训练”，它通过空间明确指代操作对象，防止机器人在杂乱环境中错认目标。同时，让模型预测下一步任务，并设置逻辑陷阱来校验机器人的判断力。
它石首席科学家丁文超博士表示，“Human-centric数据采集范式配合TARS Datacore数据引擎，可以记录和生产最高质量、最丰富的具身智能数据，真正使得scaling law成为可能。”
强大的数据采集与迁移能力，共同打磨出 WIYH 数据集在空间推理、世界模型、跨本体迁移等方面的独特优势。目前，多项基准测试结果已印证了 WIYH 数据集的核心价值：
在视言大模型（VLM）的空间推理评测中，通过对 GPT-4o、Qwen-VL-Plus 等主流模型在空间推理（SR）和空间感知（SP）等维度的对比发现，虽然各模型在通用视觉任务上表现出色，但在处理复杂的以人为中心的空间逻辑时仍存在显著差异。这一基准测试直观地揭示了当前大模型在感知操作空间时的局限，也凸显了 WIYH 数据集在训练更高阶空间感知能力方面的独特价值。
成为付费用户可以阅读 它石智航 所有资料
了解更多 →