跳到正文
热点事件观察中

VLM与视觉骨干互补的端到端驾驶双系统

1 篇报道1 个报道来源2 天前更新

先了解这件事

AI 综述

Sining Ang 等研究团队提出 HybridDriveVLA 与 DualDriveVLA 两个端到端驾驶双系统,将 VLM 与纯视觉骨干的互补性转化为可用方案,论文被 NeurIPS 2026 接收。 研究在统一的 VLM-hidden + diffusion-policy 范式下比较 InternVL3、Qwen3VL 与 ResNet、ViT、EVA-CLIP,发现策略学习扩大了共享决策子空间,但两分支仍保留不可迁移的残差:纯视觉编码器在几何主导场景更强,VLM 在语义复杂的长尾场景更有效。 HybridDriveVLA 用学习到的轨迹打分器从紧凑的跨模型候选集中选择,PDMS 从 90.80 提升到 92.10;DualDriveVLA 作为快慢系统仅在 15% 场景调用 VLM,取得 91.00 PDMS,延迟比 VLM 基线低约 1.9 倍。

AI 根据报道生成 · 1 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月6日
  1. arXiv cs.RO 机器人学
    从表征互补到双系统:VLM 与纯视觉骨干协同的端到端驾驶

    研究在统一 VLM-hidden + diffusion-policy 范式下比较 InternVL3、Qwen3VL 与 ResNet、ViT、EVA-CLIP,发现策略学习扩大共享决策子空间但两分支保留不可迁移残差,纯视觉编码器在几何主导场景更强,VLM 在语义复杂长尾场景更有效。

本事件热度走势

可比范围当前
2
可比范围峰值
510月7日 13:00
近 24 小时变化
-51%

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。