http://www.kadhoai.com.cn 2026-04-07 08:53:53 來源:優必選
近日,優必選自主研發的人形機器人Walker最強大腦——百億參數基座的多模態大模型:優必選Thinker,在機器人感知與規劃領域三大國際權威基準測試——分別由微軟、穀歌等發起與提出的MS COCO Detection Challenge、RoboVQA與Egoplan-bench2中,針對二十一個場景、四大類型的任務規劃等命題,優必選一舉斬獲四項全球榜單第一。榜單吸引了來自英偉達、北京智源研究院、上海AI Lab等全球頂尖團隊,角逐激烈。優必選這次取得的成績不僅體現了其機器人在複雜環境感知、語義理解與長程任務規劃方麵的全方位技術領先性,也標誌著人形機器人Walker S係列的“最強大腦”實現關鍵進化。
多模態感知+強推理規劃賦能工業場景規模化應用
zaizhinenghualangchaoxijuanquanqiudedangxia,renxingjiqirendeguihuanengliyichengweiguanjianjingzhengweiduzhiyi。chuantongjiqirenxitongyilaiyushezhilingzhixingrenwu,nanyiyingduigaodudongtai、多變的現實場景。而本次三大基準測試的核心,正是針對人形機器人在複雜環境中的多模態感知和推理規劃能力進行係統化驗證。
MS COCO detection challenge由you微wei軟ruan發fa起qi,是shi計ji算suan機ji視shi覺jiao領ling域yu的de權quan威wei評ping測ce基ji準zhun之zhi一yi,在zai全quan球qiu學xue術shu界jie與yu工gong業ye界jie享xiang有you極ji高gao認ren可ke度du,常chang年nian被bei眾zhong多duo頂ding尖jian論lun文wen與yu技ji術shu報bao告gao用yong作zuo感gan知zhi算suan法fa性xing能neng的de衡heng量liang標biao準zhun。
RoboVQA和Egoplan-bench2則分別由穀歌DeepMind和香港大學提出,致力於構建機器人第一視角推理與任務規劃的公開標準基準測試,重點關注多模態、長周期任務規劃能力。參與排名的模型包括北京智源、英偉達ThinkAct、Cosmos-reason1、GPT-4V、Qwen2.5-vl等。

優必選Thinker在MS COCO detection challenge - Segmentation Mask中排名第一

優必選Thinker在MS COCO detection challenge - Bounding Box排名中並列第一

優必選Thinker在RoboVQA與Egoplan-bench2中排名第一
這一成績的背後,是優必選自主研發的Thinker架(jia)構(gou)與(yu)訓(xun)練(lian)框(kuang)架(jia)所(suo)提(ti)供(gong)的(de)技(ji)術(shu)支(zhi)撐(cheng),通(tong)過(guo)多(duo)項(xiang)關(guan)鍵(jian)技(ji)術(shu)創(chuang)新(xin)性(xing)整(zheng)合(he),係(xi)統(tong)化(hua)提(ti)升(sheng)了(le)人(ren)形(xing)機(ji)器(qi)人(ren)的(de)感(gan)知(zhi)與(yu)推(tui)理(li)規(gui)劃(hua)能(neng)力(li),為(wei)工(gong)業(ye)場(chang)景(jing)的(de)規(gui)模(mo)化(hua)應(ying)用(yong)奠(dian)定(ding)基(ji)礎(chu)。

Prompt:"Move the material box to the conveyor belt."Thinker:"First locate the conveyor belt, then place the material box."Walker S2在工業場景中自主完成上料
第一,自研視覺編碼器基座,構建精準環境感知。優必選以ViT作為視覺編碼器原型,結合Co-DETR檢測頭,依托Object 365等開源數據在通用視覺任務上進行預訓練,並通過多階段模態對齊機製實現了視覺-語言模態的高效融合。最終,在優必選機器人數據集上進行微調,顯著提升機器人在工業場景中對物體、障礙和操作上下文的識別能力,為複雜環境下穩定可靠的多模態環境感知奠定了堅實基礎。
第二,超大規模參數架構,提供強大語義理解基礎。優必選自研了具有百億參數的多模態大模型Thinker基座,實現視覺-語言-時間的跨域統一表征,使機器人能夠在多場景中準確捕捉環境細節、理解任務指令並做出推理,為自動化操作提供可靠的認知基礎。
第三,時序增強算法與強化學習方法,增強長程任務規劃連貫可靠。通過大模型蒸餾技術,將百億參數模型效果濃縮至7Bcanshumoxingzhong,zaibaochigaoxingnengdetongshizengqiangduobuzhourenwufenjieyulianxujuecenengli。gaiyouhuashimoxingkeyizaiduancebushu,yongjiqirenzishendazaidesuanlijiukeshishizizhuchaijiefuzaliucheng,bimianguihuazhongduanhuoluojihunluan,zailiuchengyange、環環相扣的工業場景中展現出關鍵價值,將有力保障生產連貫性和操作安全性。
通用基礎能力打造+工業場景精調共創工業人形機器人應用生態
工業場景的精調策略正成為推動多模態大模型邁向實際應用的關鍵力量,為人形機器人在生產線上的穩定、高效部署奠定了技術基礎,加速其從技術驗證走向規模化實戰應用的進程。
優必選創新性地采用“通用基礎能力打造+工業場景精調”的微調策略,基於超200萬(wan)條(tiao)視(shi)頻(pin)數(shu)據(ju)構(gou)成(cheng)的(de)大(da)規(gui)模(mo)訓(xun)練(lian)集(ji)進(jin)行(xing)預(yu)訓(xun)練(lian),隨(sui)後(hou)引(yin)入(ru)優(you)必(bi)選(xuan)在(zai)工(gong)廠(chang)實(shi)訓(xun)中(zhong)積(ji)累(lei)的(de)億(yi)級(ji)工(gong)業(ye)數(shu)據(ju)集(ji)進(jin)行(xing)微(wei)調(tiao),並(bing)對(dui)工(gong)業(ye)場(chang)景(jing)任(ren)務(wu)規(gui)劃(hua)數(shu)據(ju)加(jia)以(yi)清(qing)洗(xi)與(yu)整(zheng)合(he),構(gou)建(jian)高(gao)效(xiao)多(duo)模(mo)態(tai)大(da)模(mo)型(xing)學(xue)習(xi)閉(bi)環(huan)。通(tong)過(guo)這(zhe)一(yi)流(liu)程(cheng),模(mo)型(xing)能(neng)夠(gou)快(kuai)速(su)學(xue)習(xi)工(gong)業(ye)場(chang)景(jing)的(de)視(shi)覺(jiao)特(te)征(zheng)、任務規則與操作偏好,最終顯著提升人形機器人在工業場景中的理解準確率、規劃適配性與決策可靠性,實現在多種複雜場景中的泛化性與穩定性。

Prompt:"Move the material box onto the pile of boxes next to it."Thinker:"The middle slot is the best one for the material box."Walker S2在工業場景中自主規劃任務
在Thinker大模型技術體係的全方位賦能下,優必選新一代工業人形機器人Walker S2 實現“最強大腦”再進化,不僅具備高精準環境感知能力,更能夠在動態場景中高效完成任務分解、實時調整與穩定規劃。借助Thinker,Walker S2可精準識別設備、wuliaoyuzhangaiwu,shendulijiechangjingyuyijicaozuoqianhouluojiguanlian,xianzhutishengchangzhouqirenwudezhixingwendingxing。zaifuzaliushuixianhuanjingzhong,jiqirenzhanxianchuchixulianguandeguihuanengli,dafujiangdiduirengongganyudeyilai。
實際應用數據顯示,相比僅基於通用數據微調的模型,采用工業數據集進行二次微調後,Walker S2在拆碼垛規劃等典型任務的中的規劃精度提升超過 20%,有力驗證了該技術方案的產業化價值,相關技術報告將在arxiv上發布。

Prompt:"Move the material box onto the roller rack."Thinker:"First locate the roller rack and then place material box."Walker S2在工業場景中自主規劃任務
當前,人形機器人正在進入大規模應用的關鍵階段,其發展亟需與開發者共同構建開放、xietongdeyingyongshengtai。weici,youbixuanjiangzhubukaiyuanyixilieyejiexiquedegongyechangjingshujujiyutongyongjichudamoxing,weiquanxingyetigongyuanzishijiyingyongyixiandegaozhiliangheguishujuziyuan。kaifazhekejiyuyoubixuanduomotaidamoxingThinker,麵(mian)向(xiang)各(ge)類(lei)新(xin)場(chang)景(jing)開(kai)展(zhan)精(jing)調(tiao)與(yu)二(er)次(ci)開(kai)發(fa),助(zhu)力(li)提(ti)升(sheng)開(kai)發(fa)效(xiao)率(lv)。我(wo)們(men)期(qi)待(dai)與(yu)全(quan)球(qiu)開(kai)發(fa)者(zhe)攜(xie)手(shou),共(gong)創(chuang)工(gong)業(ye)人(ren)形(xing)機(ji)器(qi)人(ren)的(de)應(ying)用(yong)生(sheng)態(tai),為(wei)具(ju)身(shen)智(zhi)能(neng)行(xing)業(ye)的(de)加(jia)速(su)發(fa)展(zhan)注(zhu)入(ru)持(chi)續(xu)動(dong)能(neng)。