银河通用携手北京大学、阿德莱德大学、浙江大学等科研团队,共同发布了全球首个实现跨本体全域环视的导航基座大模型——NavFoM(NavigationFoundationModel),首次将视觉-语言导航(Vision-and-LanguageNavigation)、目标导向导航(Object-goalNavigation)、视觉跟踪(VisualTracking)以及自动驾驶(AutonomousDriving)等多种机器人导航任务统一于同一框架之下。全场景覆盖:模型兼容室内与室外环境,支持在未...
银河通用携手

北京大学、阿德莱德大学、浙江大学等科研团队,共同发布了全球首个实现跨本体全域环视的导航基座大模型——navfom(navigation foundation model),首次将视觉-语言导航(vision-and-language navigation)、目标导向导航(object-goal navigation)、视觉跟踪(visual tracking)以及自动驾驶(autonomous driving)等多种机器人导航任务统一于同一框架之下。
-
全场景覆盖:模型兼容室内与室外环境,支持在未见过的新场景中实现Zero-Shot推理,无需预先建图或额外采集训练数据即可运行;
-
多任务融合:可响应自然语言指令,完成诸如目标跟随、自主路径规划等多样化导航子任务;
-
跨本体适配:能够快速、低成本地部署至机器狗、轮式人形机器人、腿式人形机器人、无人机乃至汽车等多种形态和尺寸的异构载体。
更进一步,NavFoM 可作为通用基座,供开发者通过后续微调或后训练,演化为满足特定应用场景需求的专业化导航模型。
NavFoM 提出了一个全新的通用范式:“视频流 + 文本指令 → 动作轨迹”。无论是“请跟着前方行人”还是“去找到门口那辆红色汽车”,所有任务均以一致的输入输出形式处理。该模型摆脱了传统模块化系统的拼接结构,实现了从感知到理解再到决策执行的端到端闭环。
这一突破意味着原本相互孤立的导航任务可通过统一的数据对齐与任务建模实现知识迁移,不同形态的机器人亦能共享视觉认知与运动控制的经验。
NavFoM 的核心技术包含两项创新:
-
TVI Tokens(Temporal-Viewpoint-Indexed Tokens)——赋予模型对时间序列与空间视角变化的深层理解能力;
-
BATS 策略(Budget-Aware Token Sampling)——在计算资源受限的情况下,智能选择关键信息token,确保高效且精准的推理表现。
为支撑该模型的训练,银河通用构建了迄今规模最大的跨任务导航数据集,包含高达八百万条涵盖视觉语言导航、目标导航、视觉跟踪、自动驾驶及网络导航等多类型任务的跨本体数据,并融合四百万条开放域问答样本,强化模型在语言与空间语义之间的关联理解能力。整体训练数据量约为此前同类研究的两倍水平。
相关推荐:
AI网页版智能问答,开启智慧沟通新时代,搜狗输入法ai剪切板
AI提供的阅读书目对学生的专业知识有多大帮助,变脸AI变脸
SEO优化指南:通过SEO优化让网站获得更多流量和更高排名,pcs7的ai块修正值
SEO啥意思?揭开搜索引擎优化的神秘面纱,梅州ai软件
揭秘引流项目之百度贴吧诱导引流项目的玩法和思路!
SEO导航:助力网站提升流量与排名的必备工具,荣昌建筑网站建设
提升写作效率,释放创意潜力文章生成AI软件的未来
SEO优化快排:提升网站排名的关键策略
ChatGPT-4中文免费破解版:无需付费,体验最强AI助手,ai初血
SEO包月服务:助力企业提升网站排名与流量的长期利器,网站建设流程 报读文库
SEO优化关键:如何提升网站流量和排名
AI缩写文本:助力智能生活的革新力量,ai绘画念咒
SEM优化与SEO优化:提升网站流量与转化率的双剑合璧
ChatGPTO1Pro模型:开启AI新纪元,免费应用带来无尽可能,ai电销机人
SEO与网络营销:提升企业竞争力的必备利器
“gpt无限问答版”:AI智慧新时代,体验无极限的知识,300元ai录音笔
国内哪个AI适合写自媒体文案?选对工具,效率翻倍!,ai沪剧
SEO埋词技巧,如何提升网站排名?,贵州营销推广方法
ChatGPT故障你从未听过的真相,究竟是什么让它偶尔“失灵”?,AI明星线
SEO免费教程:轻松搜索引擎优化技巧,提升网站排名!
AI提炼文章重点:让你的内容精准、清晰、高效,重庆ai换电多少一月
SEO优化是怎么操作的?揭秘高效的SEO优化策略
SEO做好,企业网站流量翻倍的关键,seo白帽技术有哪些
ChatGPT暂时不可用?如何高效应对并寻找最佳替代方案!,波司登ai试穿
AI人工智能文章生成平台,释放创作无限可能
AI写文章关键词:智能写作的未来与应用
SEO优化器:助力网站排名提升的秘密武器
AI写作自动生成:助您开启高效创作新时代
AI写出的文章查重率高吗?揭秘背后的真相与应对之策
用AI生成文章,让创作更简单高效