首页 > 计算机科学

用3万小时触觉数据补齐具身智能「手感」,新智具身联合复旦大学统一触觉「方言」

机器学习算法与自然语言处理 2026-07-28 00:35
文章摘要
背景方面,机器人在真实物理世界的落地过程中,视觉系统虽能精确定位,但缺乏接触瞬间的触觉反馈,导致插拔、抓取等精细操作频繁失败,这成为阻碍具身智能发展的核心痛点。研究目的上,新智具身联合复旦大学发布的系列技术报告,旨在将触觉从辅助模态提升为核心基建,解决触觉数据因传感器格式不统一而难以融合的问题,并探索触觉与视觉、动作模态的深度融合路径。结论表明,通过构建包含3万小时视觉-触觉交互数据的NeoData数据集,并提出NeoForce统一表征模型,有效实现了跨设备触觉数据的“普通话”统一。在此基础上,开发了两种技术路线:Neo-VTLA通过预判未来50步触觉演变而非依赖滞后信号,大幅提升了插拔、折叠等任务的成功率,并能从失败数据中自主学习进化;Neo-TWAM则在世界模型中同时预测未来视频、触觉和动作序列,确立了触觉在顶层设计中的核心地位,其仿真平均成功率达84.5%。整体工作验证了触觉模态的Scaling潜力,标志着机器人认知从“视觉驱动”向“视触融合”的重要演进。
用3万小时触觉数据补齐具身智能「手感」,新智具身联合复旦大学统一触觉「方言」
本站注明稿件来源为其他媒体的文/图等稿件均为转载稿,本站转载出于非商业性的教育和科研之目的,并不意味着赞同其观点或证实其内容的真实性。如转载稿涉及版权等问题,请作者速来电或来函联系。
最新文章
沉寂两年后,Ilya创办的SSI获英伟达重注,投资额被曝达50亿美元
沉寂两年后,Ilya创办的SSI获英伟达重注,投资额被曝达50亿美元
两年不发产品,Ilya到底在秘密研究什么?
2026-07-28
老黄「开源协议」就剩一家没签,是谁啊好难猜啊
老黄「开源协议」就剩一家没签,是谁啊好难猜啊
A社,全美最不吃压力之人
2026-07-28
从DeepSeekmHC到xHC:如何高效scale残差流?
从DeepSeekmHC到xHC:如何高效scale残差流?
xHC首次把语言模型的残差流高效扩展到16流。在18B和28BMoE语言模型的预训练实验中,xHC在DeepSeekManifold-constrainedHyper-Connections(mHC)的基础上,把收益又提升了近一倍
2026-07-27
Book学术官方微信
Book学术官方微信
Book学术文献互助
Book学术文献互助群
群 号:604180095
Book学术
文献互助 智能选刊 最新文献 互助须知 联系我们:info@booksci.cn
Book学术提供免费学术资源搜索服务,方便国内外学者检索中英文文献。致力于提供最便捷和优质的服务体验。
Copyright © 2023 Book学术 All rights reserved.
ghs 京公网安备 11010802042870号 京ICP备2023020795号-1