移動機器人，如何靠AI起飛？

《“十四五”機器人產業發展規劃》中提出
，2025 年，我國將成為全球機器人技術創新策源地、高端製造集聚地和集成應用新高地。

隨著規劃戰略的穩步推進
，在機器人技術日新月異的今天，國產機器人成果豐碩，移動機器人（AMR /AGV）作zuo為wei製zhi造zao業ye轉zhuan型xing升sheng級ji中zhong的de重zhong要yao角jiao色se之zhi一yi，隨sui著zhe倉cang儲chu物wu流liu行xing業ye的de不bu斷duan發fa展zhan和he機ji器qi人ren技ji術shu的de逐zhu步bu成cheng熟shu，正zheng逐zhu漸jian成cheng為wei物wu料liao搬ban運yun場chang景jing應ying用yong中zhong的de主zhu力li軍jun。

無論是傳統的 AGV
，還是新興的 AMR
，盡管目前國內外許多產品已能夠完成物料運輸的工作，但麵對日益複雜的非結構化應用場景（如工業製造、倉庫

、物流、戶外環境），qiyeduiyidongjiqirendezhinenghuashuipingtichulegenggaodeyaoqiu。fuzaduobiandexianshihuanjing，yaoqiujiqirenbujinnengganzhihongguandeyundongyubianhua，gengxujubeilinghuodebizhangyijidaohangnengli，yiyingduichongzhuang、實時定位等各種挑戰。

圖片來源：NVIDIA

為了推動移動機器人向更全麵智能化邁進，AI 領域的領導者——NVIDIA 也帶來了突破性的技術進展。在今年 3 月份的 GTC 2024 上，NVIDIA 發布了為 AMR/AGV 開發的參考工作流——Isaac Perceptor，可為機器人提供先進的視覺 AI 技術，助力企業快速構建可在非結構化環境中進行感知、定位和操作的穩健 AMR。這不僅向行業展示了 NVIDIA 在移動機器人領域所帶來的創新成果，更預示著 NVIDIA 正引領著整個移動機器人行業
，邁向技術革新與感知能力飛躍的新紀元。

專為移動機器人量身定製，可實現 360° 視覺感知

高效感知是移動機器人的核心競爭力。移動機器人在各行各業中的發展過程，本質上是一個以智能化移動機器人取代固定、機械生產方式的過程。因此
，要想突破應用的邊界，還需要進一步強化“機器人”屬性，不斷提高其智能化水平。具體到實際應用，移動機器人除了要能夠自主行駛，還應具備環境理解、適應動態環境和準確識別障礙物等高效感知的能力，為此


，視覺技術在移動機器人領域的深入應用至關重要。

NVIDIA 的 Isaac Perceptor 便是一套專為移動機器人設計的硬件加速軟件包，它基於 NVIDIA Isaac 機器人操作係統（ROS）構建，憑借高精度多攝像頭感知、高效的AI加速
、強大的VSLAM能力、實時的3D場景重建，以及高效的時間同步與仿真開發等特點，在移動機器人技術領域展現出了顯著的優勢。

仔細來看
，Isaac Perceptor 最關鍵的功能便是多攝像頭和3D環繞視覺，它能夠以每秒 30Hz 的頻率處理每台攝像頭高達 16.5M 個(ge)深(shen)度(du)點(dian)。這(zhe)種(zhong)高(gao)密(mi)度(du)的(de)數(shu)據(ju)處(chu)理(li)能(neng)力(li)確(que)保(bao)了(le)機(ji)器(qi)人(ren)在(zai)複(fu)雜(za)環(huan)境(jing)中(zhong)能(neng)夠(gou)捕(bu)捉(zhuo)到(dao)更(geng)多(duo)細(xi)節(jie)

，從(cong)而(er)實(shi)現(xian)更(geng)精(jing)準(zhun)的(de)環(huan)境(jing)感(gan)知(zhi)。通(tong)過(guo)來(lai)自(zi)立(li)體(ti)攝(she)像(xiang)頭(tou)的(de)時(shi)間(jian)同(tong)步(bu)圖(tu)像(xiang)對(dui)，Isaac Perceptor 還能夠計算出立體視差
，進而生成深度圖像或點雲。這一過程為機器人提供了豐富的三維空間信息
，有助於其更好地理解和適應環境。

其次，在 AI 加速方麵，Isaac Perceptor集成了高效的半監督深度神經網絡（ESS DNN）
，為基於深度神經網絡的立體視差計算提供了GPU加(jia)速(su)支(zhi)持(chi)。這(zhe)種(zhong)加(jia)速(su)能(neng)力(li)使(shi)得(de)機(ji)器(qi)人(ren)在(zai)處(chu)理(li)大(da)規(gui)模(mo)數(shu)據(ju)時(shi)能(neng)夠(gou)保(bao)持(chi)高(gao)效(xiao)率(lv)，從(cong)而(er)更(geng)快(kuai)地(di)做(zuo)出(chu)決(jue)策(ce)和(he)響(xiang)應(ying)。對(dui)於(yu)需(xu)要(yao)高(gao)精(jing)度(du)路(lu)徑(jing)規(gui)劃(hua)的(de)任(ren)務(wu)，開(kai)發(fa)者(zhe)可(ke)以(yi)通(tong)過(guo) GPU 加速的運動規劃器（如 cuMotion），顯著縮短周期時間，這種加速能力也使得機器人在執行複雜任務時能夠更加迅速。

ESS DNN 檢測 5 米處的障礙物（圖片來源：NVIDIA）

通過係統級的環境分析，快速在機器人係統中建立實時環境模型，也可助力機器人在充分理解環境的前提下自主規劃。Isaac Perceptor 具備強大的視覺同步定位和地圖繪製能力，基於NVIDIA CUDA Visual SLAM庫
，Isaac Perceptor 可使機器人在無特征環境中也能夠實現精準導航，翻譯誤差小於 1%。

在最新的更新中，cuVSLAM 結jie合he了le來lai自zi多duo個ge立li體ti攝she像xiang頭tou的de並bing發fa視shi覺jiao裏li程cheng估gu計ji，顯xian著zhu提ti高gao了le導dao航hang的de準zhun確que性xing和he穩wen定ding性xing。實shi驗yan表biao明ming，使shi用yong多duo個ge攝she像xiang頭tou的de機ji器qi人ren能neng夠gou持chi續xu實shi現xian其qi導dao航hang目mu標biao，而er使shi用yong單dan個ge攝she像xiang頭tou時shi實shi現xian目mu標biao的de幾ji率lv不bu到dao 25%。

Isaac ROS Visual SLAM 使用一個攝像頭與使用兩個攝像頭和四個攝像頭的比較

（圖片來源：NVIDIA）

Isaac Perceptor 的核心是 nvblox 庫
，這是一個使用 CUDA 加速的 3D 場景重建庫。它能夠識別最遠五米外的障礙物，以提供 2D 成本圖

，並在 300 毫秒內進行更新。這種實時的3D場景重建能力為機器人提供了精確的環境模型，有助於其更好地進行路徑規劃和避障。

使用 Isaac ROS nvblox 進行體素 3D 重建
，包括懸置障礙物重建

（圖片來源：NVIDIA）

此外
，Isaac Perceptor 能夠在傳感器數據采集時間不超過 100 毫秒的情況下實現精確的多傳感器時間同步
，確保了機器人能夠同時獲取到多個傳感器的數據，並進行準確的融合處理。Isaac Perceptor 還提供了用於仿真開發的傳感器參考模型（在 NVIDIA Isaac Sim 中），這使得開發者能夠在虛擬環境中對機器人進行測試和驗證，從而加快開發進度並降低開發成本。

總之，Isaac Perceptor 基於 AI 的強大功能使得移動機器人的視覺更敏銳、判斷更準確、理解更深入，解決原來隻有基於人類認知才能解決的問題
，使機器人可以快速切入各個場景大顯身手
，安全隱患無處遁形。

科技實力盡顯，落地應用大有可為

具體到應用
，NVIDIA Isaac Perceptor 適用於各種需要自主導航和感知能力的場景，包括但不限於倉儲物流、工業車間與醫院等。

現階段，移動機器人市場仍屬於競爭型市場
，行業集中度正逐年提升，越來越多的倉儲設備/集成商也開始加大在移動機器人產品、技術等領域的布局。那麼，在能聽到市場“炮火聲”的地方，企業更需進行深度技術合作及開拓新應用，不斷提升企業核心競爭力
，這樣才能在市場中立於不敗之地。

NVIDIA Isaac Perceptor 的早期合作夥伴中既有倉儲/內部物流行業的領先企業，也有汽車/工業機器人製造商和集成商，包括 ArcBest
、比亞迪電子
、Gideon、凱傲
、Kudan、idealworks、RGo 和泰瑞達機器人。

今年6月份，RGo Robotics 就曾宣布將把 NVIDIA 的 Isaac 技術集成到其感知平台中
，為 AMR 提供更先進的視覺功能。

RGo 表示，其感知引擎是一種用於定位
、障礙物檢測和場景理解的人工智能和視覺係統

，通過將其與 NVIDIA Isaac Perceptor 加jia速su庫ku相xiang結jie合he，移yi動dong機ji器qi人ren可ke以yi在zai新xin設she施shi中zhong快kuai速su設she置zhi，客ke戶hu由you此ci可ke以yi在zai幾ji個ge月yue內nei快kuai速su部bu署shu移yi動dong機ji器qi人ren，並bing且qie在zai任ren何he環huan境jing中zhong穩wen定ding運yun行xing它ta們men。

圖片來源：RGo Robotics

汽車巨頭子公司比亞迪電子也表示正在利用NVIDIA Isaac Perceptor進行全係列 AMR 的開發
，並進一步提出一套完整的工廠物流解決方案。

據了解
，Isaac Perceptor 的多攝像頭 3D 環視功能為比亞迪電子 AMR 提供了強大的視覺感知能力
，使其能夠更準確地識別周圍環境

，實現自主避障和導航。通過采用 NVIDIA Jetson Orin 高性能人工智能係統級模塊，尤其是激光雷達和視覺感知模塊
，從而將激光雷達、IMU、輪速計等多傳感器融合技術結合，AMR 可達到在室內大麵積且複雜動態環境中進行實時高精度建圖和定位的強大能力
，以此實現高效、精準的物流作業。

通過應用 NVIDIA Isaac Perceptor 技術開發的 AMR，比亞迪電子成功優化了生產流程中的物流環節
，AMR 的自主導航和精準作業能力顯著提高了生產效率與安全性
，也為企業大幅降低了生產成本。

此外
，ArcBest 的 Vaux Smart Autonomy AMR 叉車和前移式卡車也使用了 Isaac Perceptor。集成相關技術後，機器人獲得了更好的感知、語義感知導航和 3D 映射
，在倉庫、配送中心和製造設施的物料搬運過程中
，能夠順利進行障礙物檢測。

圖片來源：ArcBest

客戶的體驗和滿意度是企業的終極目標
，這些合作夥伴的成功案例進一步證明了 Isaac Perceptor 在移動機器人感知領域的卓越性能和廣闊應用前景。值得注意的是，目前一些傳統移動機器人主要使用 2D 激光雷達或 3D 激光雷達進行檢測，前者功能有限
，無法看到的低窪危險或懸掛物等障礙物，後者成本高昂
，不利於企業進行成本控製，而 Isaac Perceptor 通tong過guo提ti供gong基ji於yu多duo個ge攝she像xiang頭tou且qie不bu影ying響xiang功gong能neng的de解jie決jue方fang案an
，在zai大da幅fu提ti高gao移yi動dong機ji器qi人ren避bi障zhang水shui平ping的de同tong時shi，助zhu力li企qi業ye完wan美mei實shi現xian降jiang本ben增zeng效xiao
，這zhe正zheng是shi移yi動dong機ji器qi人ren企qi業ye提ti升sheng核he心xin競jing爭zheng力li的de關guan鍵jian所suo在zai。

如今移動機器人主要應用於倉儲、產線中
，但在智能製造時代，行業仍具有很大的想象空間，而 AI 技術將為移動機器人行業注入源源不斷的發展動力。

從技術革新到行業應用
，再到生態係統建設和用戶體驗的改善，NVIDIA Isaac Perceptor 利用最先進的生成式 AI 和仿真技術
，正在為移動機器人行業帶來前所未有的技術革新，也預示著未來更多領域的自動化和智能化可能性。未來，隨著 AI 技術的不斷進步和行業的深入合作，NVIDIA 將持續在 AI 乃至機器人行業中扮演重要角色，對於 NVIDIA 而言，其對機器人市場的探索才剛剛開始。