產品簡介
TrackVLA 是北京銀河通用機器人有限公司於2025年6月1日推出的一款導航大模型。該模型為端到端具身FSD模型。其採用純視覺環境感知,具備泛化推理和零樣本能力,可通過自然語言指令驅動,並端到端輸出語言和機器人動作。它是一個由仿真合成動作數據訓練的“視覺-語言-動作”(Vision-Language-Action, VLA)大模型。該模型使機器人能夠基於視覺感知進行環境理解與自主運動,無需提前構建環境地圖,也不依賴遠程操控。
TrackVLA 在一個統一模型中集成了感知、推理、運動和互動能力。與將視覺感知、目標識別和路徑規劃分開處理的傳統模式不同,TrackVLA 將這些功能進行了整合。該模型旨在在複雜環境中識別服務對象,以提供相應的服務。它不依賴特定硬體,具備跨本體套用能力,可部署於四足機器人、輪式機器人、雙足機器人及飛行機器人等多種平台上。
技術原理
TrackVLA是一個由仿真合成動作數據訓練的“視覺-語言-動作”(Vision-Language-Action, VLA)大模型。其技術核心在於端到端的設計理念,模型能夠直接從“看到的圖像”和“聽到的指令”中推理出“怎么走”,無需人為拆分多個步驟。與傳統的“視覺感知→目標識別→路徑規劃”分開處理模式不同,TrackVLA將這些能力通過一個統一模型整合。
該模型具備零樣本(Zero-Shot)泛化能力,無需提前建圖或對特定環境進行預先訓練,即可在陌生場景中依靠模型內嵌的環境理解知識實現“現學現走”的自主導航。模型通過仿真合成動作數據進行訓練,實現了從仿真到現實(Sim2Real)的能力遷移。2025年11月,銀河通用發布了升級版本TrackVLA++,其能力得到顯著提升,能夠實現30分鐘以上在複雜環境中的穩定長程自主跟隨。
功能特點
TrackVLA是一個端到端導航模型,集成了感知、推理、運動和互動能力。該模型具有多種功能,包括自然語言指令理解、目標識別跟蹤、密集人群跟隨、目標丟失後重新定位、非剛性運動目標識別跟隨和風險識別與安全路徑規劃。
該模型能理解如“跟著媽媽”“換成孩子”等自然語言指令,識別對應的目標位置,並可根據新指令切換跟隨對象。在超市、商場等密集人流和複雜貨架環境中,它能識別並跟隨指定目標,其能力可套用於多種移動目標,包括人類和寵物狗等非剛性運動目標。在兒童遊樂區等場景中,該模型能識別玩具、水漬等潛在風險,並規划行進路徑。
當目標意外走出視野後,TrackVLA能通過空間記憶和運動推理算法,分析目標軌跡並規劃路徑重新找回目標。該模型無需提前構建環境地圖,即可在商場、電梯、兒童遊樂區等陌生場景中實現自主導航與連續任務,並能夠避讓行人、應對光線變化和地面障礙。
其遠程功能允許用戶通過App查看機器人視角,並能接收包括兒童跌倒、老人滯留等在內的安全預警信息。TrackVLA具備零樣本泛化能力,可在未訓練過的真實場景中完成驗證;其升級版本TrackVLA++可以實現30分鐘以上穩定的長程自主跟隨。
套用場景
TrackVLA大模型可用於多種服務場景,其功能包括遠程可視守護和安全預警,以及在商場、園區等環境中的安防巡檢。
在室內物流方面,該模型適用於倉庫、藥店等場景的物品搬運與揀選。有套用實例顯示,搭載該模型的機器人曾在北京的無人藥店中進行藥品揀選和配送。
該模型不依賴特定硬體,可部署於四足機器人、輪式機器人等多種機器人平台上。
發展歷史
2025年6月,銀河通用發布端到端具身FSD大模型TrackVLA。
2025年11月,銀河通用發布了該模型的升級版本TrackVLA++,該版本在複雜環境中的長程自主跟隨能力有所提升。
市場反響
TrackVLA的發布與推進“通用具身智慧型機器人”落地相關。該模型具備產品級端到端能力。在2025年中國具身大模型的相關評述中,銀河通用及其TrackVLA模型被列為技術布局者之一。該模型具備零樣本導航、複雜場景長時穩定跟隨等技術能力。