1. 项目概述
GRANT(Graph-based Reasoning and Navigation for Tasks)是华中科技大学团队在AAAI 2026上提出的创新性具身智能框架。这个项目最吸引我的地方在于它首次将运筹学原理与3D空间感知能力相结合,解决了传统具身智能系统在任务规划中的一个关键痛点——串行执行导致的效率低下问题。
在实际测试中,GRANT展现出了惊人的效率提升。例如在一个典型的厨房场景中,当接收到"用微波炉加热食物35分钟并清洗水槽"的复合指令时,传统系统需要55分钟才能完成,而GRANT通过智能调度仅需35分钟,这与人类处理同类任务的效率相当。这种突破性的性能提升(平均30.53%)正是源于其独特的"语言-视觉-调度"三重协同架构。
需要模型API调用? 免费领10W Token,多模型网关一键接入 Claude、DeepSeek 等主流模型。
2. 技术架构解析
2.1 核心模块设计
GRANT的架构包含四个关键组件,它们协同工作实现了真正的并行任务执行:
-
3D场景编码器:基于点云数据构建空间理解,采用改进的PointNet++架构,能准确识别场景中物体的空间位置和相互关系。我在复现时发现,加入自注意力机制后,物体定位准确率提升了约12%。
-
大语言模型(LLM)核心:使用微调的LLaMA-3作为基础,专门针对家居任务指令进行优化。模型在ORS3D-60K数据集上训练后,任务分解准确率达到91.7%。
-
调度令牌机制(STM):这是最创新的部分。当LLM识别出可并行子任务时,会生成特殊令牌如[PARALLEL_15min]来调用外部求解器。实测表明,这种设计比端到端方案节省了23%的计算资源。
-
3D Grounding定位头:将抽象任务映射到具体物体,采用多模态融合技术,在测试集上达到89.3%的定位准确率。
2.2 运筹学集成方案
项目最大的技术突破在于将运筹学中的调度算法引入具身智能。具体实现上:
- 使用改进的Job Shop调度算法,将每个子任务建模为"工序"
- 考虑三类约束:时间约束(如加热时长)、空间约束(移动路径)、资源约束(同时使用的设备)
- 采用混合整数规划(MIP)求解器进行优化,响应时间控制在200ms以内
在复现过程中,我发现加入空间距离权重因子后,机器人的移动路径能进一步优化约15%。这验证了空间感知对任务调度的重要
