北大董豪团队发布InstructNav:首个通用指令导航大模型
来源:ictimes 发布时间:2 天前 分享至微信

北京大学的董豪团队成功研发出首个通用指令导航大模型系统——InstructNav,该系统能够将人类指令转化为机器人的实际行动,从寻找物体到满足抽象需求无所不能。这一创新成果已被CoRL 2024会议接纳,并即将开源代码。


InstructNav通过动态导航链路技术,将不同导航指令统一处理,使机器人能灵活应对各种复杂指令。它利用大语言模型规划路径,并根据实时环境更新导航策略,如寻找沙发时,会优先探索电视附近区域。


为实现从规划到执行的跨越,InstructNav将规划结果映射到多源价值地图上,包括动作、语义、直觉和轨迹价值地图,通过综合评估确定最优行动路径。


在多个零样本导航任务评测中,InstructNav均表现出色,尤其在视觉语言导航、物体目标导航和需求驱动导航上,均达到业界领先水平,展示了其强大的泛化能力和实用性。


[ 新闻来源:ictimes,更多精彩资讯请下载icspec App。如对本稿件有异议,请联系微信客服specltkj]
存入云盘 收藏
举报
全部评论

暂无评论哦,快来评论一下吧!