巨人天成
产经 科技 企业 数据 峰会 快讯 商业

让机器人学会“手感”:TacForcing让精细操作告别“闭眼”困境

2026-09-09来源:快讯编辑:瑞雪

想象蒙住双眼操作滴管:手指能感受到液体流动带来的压力变化,但眼睛看到的画面几乎毫无不同。上海交通大学邓志杰实验室通过实验揭示了这一现象背后的数据差异——在40步操作中,视觉信号的余弦距离仅变化0.005,而触觉信号的波动幅度高达0.55。这种触觉与视觉的"时间错位",正是当前机器人精细操作面临的核心挑战。

主流的视觉-语言-动作(VLA)模型采用"预生成动作块"模式,即根据初始画面生成连续动作序列后闭眼执行。这种模式在均匀材质场景中尚可运行,但面对触觉信号剧烈变化的场景时,模型因缺乏实时反馈而逐渐偏离真实接触状态。研究团队将此比喻为装修师傅仅凭进门时的墙面观察制定全程施工计划,若遇到材质不均的墙面,后续操作必然失误。

针对这一痛点,研究团队提出TacForcing框架,其核心创新在于将传统动作专家改造为"流式动作专家"。该模块将50步动作拆分为10个5步小块,采用类似面包烘焙的分批处理机制:靠前的动作块优先生成并执行,后续块保持半成品状态,根据最新触觉反馈持续优化。这种设计通过流匹配技术实现,每个动作块拥有独立的时间进度参数,避免传统方法中所有步骤同步推进的僵化模式。

为解决触觉信息时效性问题,研究团队开发了执行感知触觉注意力(EATA)机制。该机制通过注意力掩码确保最新触觉数据仅影响即将执行的动作块,防止过时信息干扰后续步骤。实验数据显示,移除EATA后系统性能显著下降:仿真环境成功率从60%跌至51%,真实场景中更是从69%骤降至48%,印证了触觉反馈时效性对操作精度的决定性作用。

训练阶段采用动态进度采样策略,随机模拟不同执行阶段的中间状态,确保模型适应"半成品动作+实时触觉"的推理场景。损失函数仅计算未完成动作的误差,已执行部分不再参与参数更新。这种训练-推理对齐策略使模型在仿真环境六个接触密集型任务中取得65%的平均成功率,在真实场景的液体转移任务中成功率达50%,较基线方法提升超30个百分点。

实验特别设置了"固定触觉"对照组,该组在动作全程仅使用初始触觉数据。结果显示其仿真成功率降至42%,真实场景成功率仅31%,甚至低于完全不用触觉的模型。这一反直觉结果揭示:过时的触觉信息非但无益,反而会因误导模型决策而降低性能,凸显了动态更新机制的重要性。

该研究对动作块大小(block size)的参数选择保持开放态度。当前采用固定的5步拆分策略,但更细粒度的拆分虽能提升触觉响应灵敏度,却会增加计算开销;反之则可能重蹈传统方法的覆辙。这种灵敏度与效率的权衡关系,为后续研究提供了新的探索方向。

在真实场景验证中,TacForcing展现出显著优势:擦白板任务成功率达82%,瓶子直立任务成功率76%,均领先基线方法15个百分点以上。特别是在需要精确力度控制的液体转移任务中,其50%的成功率较次优方案提升31个百分点,直观证明了实时触觉反馈在动态操作场景中的关键价值。

字节跳动Gauth全面上线AI课程:数学课具象化,还开放UGC路径创互动课
在历史课的基础上,Gauth在AI课程中新增了200多门数学课,包括代数1、代数2、几何,这些都是美国高中生的必学内容。 用户输入主题,选择当前能力水平,以及想要了解的具体领域,Gauth会根据这些选择,用…

2026-09-09

2026全球工业互联网大会沈阳论剑 共谋冶金矿山产业数智化新路径
中国移动上海产业研究院副总经理乔建设表示,中国移动依托移动天工 AI原生国家级“双跨”工业互联网平台,夯实5G-A与算力网络数智底座,打通工业数据链路,深耕工业安监、设备智能运维等核心场景,已服务辽宁50余…

2026-09-09

IFA2026柏林展:魔法原子携三款机器人亮相,加速欧洲场景化商用落地
魔法原子现场工作人员对雷科技表示,MagicBot D1支持夹爪和灵巧手末端自主切换,在需要精细化操作时,可自主快速切换至灵巧手,面对取放工具、抓握物品等对力量要求较高的操作时,则能自主快速切换至夹爪。在魔…

2026-09-08

宇树科技全球首秀:世界模型实时驱动 人形机器人自主格斗成现实
来源:环球网【环球网科技综合报道】9月8日消息,宇树科技正式对外宣布,在全球范围内首次完成由世界模型实时驱动的全自主人形机器人格斗演示,同步公开了该场景下的实拍运行画面。 根据宇树科技官方披露的技术细节,…

2026-09-08

荣耀MagicOS 11 9月15日发布 系统级AI智能体引领手机AI新变革
该系统最大的亮点,是实现了行业首个系统级AgentHarness(智能体中枢)的商用落地,标志着手机AI从“语音助手”向“可自动执行任务的智能体”迈出了关键一步。MagicOS 11正是这条演进路径上的最新…

2026-09-08