http://www.kadhoai.com.cn 2026-04-08 06:33:03 來源:中國網
不需要鼠標、鍵盤,甚至接觸,計算機會“看到”你想告訴它的一切—在微軟的“未來科技”布局裏,識別空中手書是一幕關於人機互動的奇幻片段。
在2054年的華盛頓,湯姆·kelusishiyandeandedundaizhetayouchudiandeshoutao,biandadianhuabianyongshuangshoulingrenyanhualiaoluandizaitoumingxianshiqishangcaozuochengxuhechuangkou,kujinshizu。jishibushikehuanmiheyouximi,yehuiyouhenduorenchongjingdianying《少數派報告》裏科幻般的生活。
事實上,你很有可能比湯姆·克魯斯更酷:當你在空中對著機器比劃的時候,已經不再是“對牛彈琴”。微軟亞洲研究院的識別空中手書技術使得計算機、智能家電、遊戲機能夠認識我們所比劃的文字,識別內容包括了漢字、日文、韓文,數字和英文單字。就像“我來比劃你來猜”遊戲,不同的是,猜測我們比劃內容的對方,現在變成了和人一樣“聰明”的機器。識別空中手書技術,隻需要一台普通的電腦、一個攝像頭、一個遊戲機手柄,就可以實現,脫離鼠標、鍵盤,甚至代替像iPhone那樣觸控技術的人機互動。
如果說鍵盤鼠標輸入和手寫觸控分別代表人機交互的兩個階段,那麼,識別空中手書可以說使這種交互進入了3.0時代。“對dui於yu這zhe項xiang基ji礎chu的de創chuang新xin技ji術shu,想xiang到dao在zai上shang麵mian開kai發fa出chu的de無wu數shu最zui具ju有you想xiang象xiang力li的de應ying用yong就jiu令ling人ren激ji動dong。這zhe也ye是shi作zuo為wei研yan究jiu員yuan最zui值zhi得de期qi待dai的de時shi刻ke。沒mei有you人ren能neng預yu見jian,軟ruan件jian開kai發fa商shang和he應ying用yong微wei軟ruan平ping台tai的de開kai發fa人ren員yuan會hui在zai識shi別bie空kong中zhong手shou書shu技ji術shu上shang麵mian開kai發fa怎zen樣yang的de應ying用yong。可ke以yi說shuo,能neng想xiang多duo遠yuan就jiu有you多duo遠yuan。”微wei軟ruan亞ya洲zhou研yan究jiu院yuan語yu音yin組zu主zhu任ren研yan究jiu員yuan霍huo強qiang在zai說shuo這zhe些xie話hua的de時shi候hou,識shi別bie空kong中zhong手shou書shu項xiang目mu的de主zhu要yao負fu責ze人ren馬ma磊lei正zheng在zai旁pang邊bian拿na著zhe一yi顆ke橘ju子zi給gei記ji者zhe演yan示shi微wei軟ruan的de“軟”字。
IT的太極之舞
讓機器“懂得”人類的想法並“表達”出來,並不容易。傳統的使用鍵盤輸入和現在智能手機上流行的觸控輸入,把信息明確地“灌輸”給計算機。然而,空中手寫識別技術,更像是中國傳統的太極拳法,動作不僅像太極拳一樣行雲流水,而且能夠“手隨心動”。
識別空中手書項目組設計了兩種解決方案來做演示:最廉價的方式是使用一個網絡攝像頭來觀察用戶手的運動;或者使用一種帶有被稱作“陀螺儀”和“加速度儀”dechuanganqideshebeilaibuzhuoyonghushoudeyundong。dangyonghushoudeyundongbeibuzhuodaozhihou,duiqijinxingbuchang,zengqianghou,shouxieshibiemokuaijiunengrenchuyonghuzaikongzhongxiedewenzi。
“機器從捕捉、映射、識別到顯示,整個過程涉及兩方麵的技術。一是動態運動物體捕捉;二是手寫識別。”馬(ma)磊(lei)向(xiang)記(ji)者(zhe)介(jie)紹(shao)道(dao)。選(xuan)擇(ze)一(yi)個(ge)能(neng)夠(gou)與(yu)周(zhou)圍(wei)環(huan)境(jing)的(de)顏(yan)色(se)區(qu)分(fen)開(kai)來(lai)的(de)物(wu)體(ti),放(fang)在(zai)視(shi)頻(pin)捕(bu)捉(zhuo)框(kuang)的(de)中(zhong)心(xin)位(wei)置(zhi),按(an)動(dong)遊(you)戲(xi)手(shou)柄(bing)的(de)按(an)鈕(niu)開(kai)始(shi)準(zhun)備(bei)書(shu)寫(xie)。在(zai)這(zhe)個(ge)對(dui)運(yun)動(dong)物(wu)體(ti)的(de)捕(bu)捉(zhuo)過(guo)程(cheng)中(zhong),就(jiu)要(yao)教(jiao)會(hui)計(ji)算(suan)機(ji)該(gai)捕(bu)捉(zhuo)的(de)目(mu)標(biao)物(wu)體(ti),計(ji)算(suan)機(ji)知(zhi)道(dao)了(le)所(suo)選(xuan)擇(ze)的(de)運(yun)動(dong)目(mu)標(biao),周(zhou)圍(wei)環(huan)境(jing)裏(li)其(qi)他(ta)物(wu)體(ti)的(de)運(yun)動(dong)就(jiu)不(bu)會(hui)產(chan)生(sheng)幹(gan)擾(rao)。
mubiaowutizaikongzhongyundongdeguochengzhong,chanshengleyigesanweidetuxiangguiji,yingshedaoerweideshexiangjilideshiyigepingmianhuadeguijituxing,zhegepingmianhuadeyundongguijiyaoqiuduimohu、抖動都能很好的處理。而當計算機獲得了清晰的運動軌跡後,後台的手寫識別就可以進行分析,從而得到用戶想要書寫的文字。“這個看似簡單的圖像分析和文字識別在相應的領域裏都做了幾十年,絕對可以稱得上是高科技。”霍強對記者說,“比如數字3,會有像‘了’等相近的文字,這無疑增加了識別的難度。”最後的識別結果綜合了機器對書寫動作和圖像結果的分析,“形狀信息很重要,首先要像;另一方麵,動態信息也是個很重要的參考。”
馬ma磊lei對dui記ji者zhe表biao示shi,空kong中zhong手shou寫xie識shi別bie與yu在zai手shou寫xie板ban書shu寫xie不bu同tong在zai於yu,手shou寫xie板ban一yi筆bi一yi劃hua,折zhe點dian尖jian銳rui。而er空kong中zhong寫xie字zi需xu要yao一yi筆bi完wan成cheng,沒mei有you虛xu實shi的de概gai念nian,不bu會hui提ti筆bi。在zai空kong中zhong書shu寫xie的de過guo程cheng中zhong,“類似於中國的太極,相對圓滑,行雲流水。在速度變成零的時候不可能出現相應的折點,需要對這種字體情況進行特殊處理。”
交互的未來
蓋茨曾說,人與計算機的交互將變得越來越像人與人之間的互動。蘋果公司的iPhone手機和任天堂的Wii遊戲機,在用戶互動界麵的出色表現獲得了消費者的青睞。而微軟的下一代操作係統Windows7,作為自然的用戶界麵,也內置了觸摸支持功能;微軟智能觸控桌麵電腦Microsoft Surface,看上去更像是一張多功能的桌麵屏幕。
談到識別空中手書這項技術的最初想法,微軟亞洲研究院首席研究員兼語音組負責人宋平表示,“這zhe個ge想xiang法fa是shi為wei了le解jie決jue在zai沒mei有you鍵jian盤pan或huo手shou寫xie板ban的de特te定ding環huan境jing裏li如ru何he用yong手shou勢shi輸shu入ru字zi符fu的de問wen題ti。識shi別bie空kong中zhong手shou書shu從cong技ji術shu和he提ti升sheng用yong戶hu體ti驗yan方fang麵mian都dou是shi一yi項xiang很hen傑jie出chu的de創chuang新xin。我wo相xiang信xin這zhe項xiang創chuang新xin將jiang有you可ke能neng被bei應ying用yong到dao微wei軟ruan目mu前qian和he未wei來lai的de很hen多duo產chan品pin及ji服fu務wu中zhong。”
而er從cong研yan發fa的de角jiao度du,脫tuo離li了le鍵jian盤pan鼠shu標biao的de識shi別bie空kong中zhong手shou書shu技ji術shu將jiang想xiang象xiang力li更geng拉la近jin一yi步bu,抑yi或huo是shi對dui未wei來lai主zhu流liu交jiao互hu式shi體ti驗yan的de提ti前qian預yu演yan。而er這zhe,將jiang為wei微wei軟ruan在zai人ren機ji交jiao互hu體ti驗yan上shang培pei養yang越yue來lai越yue多duo的de“手語者”。
對(dui)於(yu)識(shi)別(bie)空(kong)中(zhong)手(shou)書(shu)在(zai)未(wei)來(lai)應(ying)用(yong)的(de)三(san)個(ge)場(chang)景(jing),馬(ma)磊(lei)向(xiang)記(ji)者(zhe)介(jie)紹(shao)道(dao),在(zai)交(jiao)互(hu)式(shi)遊(you)戲(xi)環(huan)境(jing)下(xia),用(yong)戶(hu)在(zai)空(kong)中(zhong)輸(shu)入(ru)一(yi)些(xie)文(wen)字(zi),如(ru)名(ming)字(zi),答(da)案(an),甚(shen)至(zhi)是(shi)解(jie)密(mi)類(lei)遊(you)戲(xi)的(de)符(fu)號(hao),以(yi)獲(huo)取(qu)不(bu)同(tong)的(de)遊(you)戲(xi)體(ti)驗(yan);而在可聯網設備上,比如網絡電視(IPTV)和Xbox,甚至還有智能家電,需要輸入文字信息時用遠距離“比劃”都很方便。比如在網絡電視上搜索視頻,在Xbox上搜索遊戲動畫等等;而er對dui於yu家jia長chang來lai說shuo,采cai用yong手shou勢shi這zhe種zhong寓yu教jiao於yu樂le的de方fang式shi,更geng適shi合he好hao動dong且qie喜xi歡huan視shi覺jiao衝chong擊ji的de小xiao孩hai。由you於yu遠yuan距ju離li輸shu入ru更geng能neng體ti現xian脫tuo離li鍵jian盤pan鼠shu標biao輸shu入ru信xin息xi的de優you勢shi,未wei來lai,微wei軟ruan亞ya洲zhou研yan究jiu院yuan希xi望wang識shi別bie空kong中zhong手shou書shu技ji術shu能neng夠gou為wei用yong戶hu解jie決jue更geng多duo的de實shi際ji問wen題ti,能neng夠gou使shi能neng其qi他ta有you趣qu有you意yi義yi的de事shi情qing發fa生sheng。而er且qie,將jiang不bu限xian定ding隻zhi用yong一yi個ge跟gen蹤zong點dian,未wei來lai將jiang會hui有you多duo個ge跟gen蹤zong點dian來lai應ying用yong到dao微wei軟ruan地di圖tu搜sou索suo服fu務wu的de查zha找zhao、縮放等。
“womenzuoyanfademudeshiweiletishengyonghutiyan,weiruanyazhouyanjiuyuanzaiyuchanpinbumendehudonghegoutongguochengzhong,laigongtongtantaobazhexiechuangxinjishuyingyongdaochanpinlihuozhejishuzhuanyichuqudeshijian。danshi,zuoweiyigeyanjiurenyuan,nenggourangqianjiawanhuyingyongdaozijidechuangxinxiangfashizuilingwomenjidongdeshiqing。”霍強對記者說。
霍huo強qiang和he馬ma磊lei最zui近jin剛gang從cong微wei軟ruan雷lei德de蒙meng總zong部bu回hui來lai,他ta們men在zai微wei軟ruan研yan究jiu院yuan一yi年nian一yi度du的de技ji術shu節jie上shang展zhan示shi了le識shi別bie空kong中zhong手shou書shu技ji術shu,吸xi引yin了le包bao括kuo微wei軟ruan產chan品pin部bu門men,微wei軟ruan全quan球qiu其qi它ta研yan究jiu院yuan同tong事shi以yi及ji媒mei體ti的de關guan注zhu。著zhu名ming博bo客ke人renChris Pirillo 在他博客中寫道:“雖sui然ran這zhe個ge軟ruan件jian目mu前qian還hai隻zhi是shi個ge技ji術shu原yuan型xing,沒mei有you被bei應ying用yong,但dan是shi我wo很hen看kan好hao它ta,這zhe是shi一yi項xiang驚jing人ren的de研yan究jiu。你ni能neng想xiang像xiang這zhe個ge軟ruan件jian什shen麼me時shi候hou能neng被bei應ying用yong嗎ma?我wo們men所suo有you的deXbox迷都拭目以待吧!”
zhexiechongmanwuxiankenengxingdejichuchuangxinshizuijunengliangde。tabenshenkenengbushiyigechengshudeyingyong,danshiyidanyuxianshishenghuozhongyouqudexiangfaxiangjiehe,jiukeyicuishengchuwushudejingcaichengguo。weiruanshanchangyutiaodongfengfudeyanfaziyuanzuoxie“打地基”的事情,識別空中手書就拓展了更多豐富應用的可能性。而這,或者就是微軟亞洲研究院“研發之美”的魅力所在。