為機(jī)器人裝“大腦”,谷歌發(fā)布RT-2大模型
就在前些時(shí)候,谷歌旗下DeepMind發(fā)布了一款名為Robotics Transformer 2的新型視覺-語言-動(dòng)作(VLA)模型,這一模型某種程度上可以理解為機(jī)器人的“大腦”,給機(jī)器人輸入了認(rèn)知能力。那么,如何理解這一模型帶來的影響?一起看看作者的解讀。
大語言模型不僅能讓應(yīng)用變得更智能,還將讓機(jī)器人學(xué)會(huì)舉一反三。在谷歌發(fā)布RT-1大模型僅半年后,專用于機(jī)器人的RT-2大模型于近期面世,它能讓機(jī)器人學(xué)習(xí)互聯(lián)網(wǎng)上的文本和圖像,并具備邏輯推理能力。
該模型為機(jī)器人智能帶來顯著升級(jí)——即便在機(jī)器人沒有經(jīng)歷過的場(chǎng)景下,RT-2也通過學(xué)習(xí)讓它根據(jù)指令完成任務(wù)。
谷歌DeepMind機(jī)器人技術(shù)主管Vincent舉例稱,如果讓以前的機(jī)器人丟垃圾,必須要專門訓(xùn)練它理解什么是垃圾、如何撿起和扔到哪去。現(xiàn)在RT-2能夠從網(wǎng)絡(luò)數(shù)據(jù)上學(xué)習(xí)識(shí)別和處理垃圾的方法,不必逐一特訓(xùn)不同的場(chǎng)景了。
AI的發(fā)展讓機(jī)器人的“大腦”實(shí)現(xiàn)了物種進(jìn)化般的迭代,另一面是,機(jī)器人失控的風(fēng)險(xiǎn)也隨之增加。
一、RT-2大模型實(shí)現(xiàn)機(jī)器人自主學(xué)習(xí)
ChatGPT的火爆,讓世界見識(shí)了大語言模型的強(qiáng)大力量。人們對(duì)大模型不再陌生,開始使用基于大模型的應(yīng)用繪畫、作圖、搜索資料、設(shè)計(jì)劇情等,而妙用不止于此。谷歌腦洞大開,專門給機(jī)器人造了個(gè)大模型,讓機(jī)器人擁有了自主學(xué)習(xí)能力。
不久前,谷歌旗下DeepMind發(fā)布了一款名為Robotics Transformer 2(簡稱RT-2)的新型視覺-語言-動(dòng)作(VLA)模型,該模型相當(dāng)于機(jī)器人的專用大腦,能夠指導(dǎo)機(jī)器人識(shí)別視覺和語言,讓其理解指令并做出正確的操作。
谷歌介紹,RT-2基于Transformer模型開發(fā),根據(jù)互聯(lián)網(wǎng)上的文本和圖像進(jìn)行訓(xùn)練,直接指示機(jī)器人執(zhí)行動(dòng)作。就像用文本訓(xùn)練大語言模型學(xué)習(xí)人類知識(shí)一樣,RT-2可以將網(wǎng)絡(luò)數(shù)據(jù)喂給機(jī)器人,指導(dǎo)機(jī)器人的行為。
為了展示RT-2的能力,谷歌發(fā)布了一個(gè)演示視頻,讓搭載RT-2的機(jī)器人完成一些它此前從未經(jīng)過訓(xùn)練的項(xiàng)目。
視頻中,面對(duì)一堆隨意放在桌上的物品,搭載了RT-2模型的機(jī)械臂能夠聽懂人類語言并做出相應(yīng)的反應(yīng)。
比如,命令它“撿起已滅絕的動(dòng)物”,機(jī)械臂就能從獅子、鯨魚、恐龍這三個(gè)塑料玩具中準(zhǔn)確選擇恐龍;如果命令它將香蕉放到2+1的總和的位置,機(jī)械臂直接把香蕉放在了數(shù)字3的位置;再讓它把草莓放入碗里,機(jī)器人也能夠無視蘋果、橘子等水果,選對(duì)草莓。
不過,在演示過程中,機(jī)器人也出現(xiàn)了錯(cuò)誤,它不能準(zhǔn)確地識(shí)別汽水口味,這讓它看起來還有不小的優(yōu)化空間。
即便還不夠完美,但機(jī)器人能夠自主理解、推理和執(zhí)行任務(wù),已經(jīng)是一個(gè)長足的進(jìn)步。
DeepMind機(jī)器人技術(shù)主管Vincent以“扔垃圾”這個(gè)看似簡單的操作舉例,如果想要以前的系統(tǒng)執(zhí)行丟棄垃圾的行為,必須明確訓(xùn)練它識(shí)別和處理垃圾,而RT-2可以從大量網(wǎng)絡(luò)數(shù)據(jù)中學(xué)習(xí)并理解什么是垃圾,并在未經(jīng)特定訓(xùn)練的情況下進(jìn)行識(shí)別。盡管未曾接受過相關(guān)動(dòng)作訓(xùn)練,但它能掌握如何丟棄垃圾的方法?!翱紤]到垃圾的抽象性,比如各種薯片包或香蕉皮在你食用后就成為了垃圾,RT-2能通過其視覺語言培訓(xùn)數(shù)據(jù)理解這個(gè)概念,并完成任務(wù)。
RT-2就給機(jī)器人輸入了認(rèn)知能力,讓它能夠在互聯(lián)網(wǎng)上學(xué)習(xí)和進(jìn)步,甚至還能進(jìn)行一般推理。這對(duì)于機(jī)器人產(chǎn)業(yè)來說,不亞于一次物種進(jìn)化。
二、機(jī)器人加速進(jìn)化,再觸AI安全底線
事實(shí)上,給機(jī)器人裝上大腦這件事,谷歌并不是第一次嘗試了。就在去年12月,谷歌發(fā)布了RT-1大模型,它可以標(biāo)記機(jī)器人輸入和輸出的動(dòng)作,在運(yùn)行時(shí)實(shí)現(xiàn)高效推理,并使實(shí)時(shí)控制成為可能。
RT-1模型是在一個(gè)包含130k個(gè)“情景”的大型真實(shí)世界機(jī)器人數(shù)據(jù)集上訓(xùn)練的,該數(shù)據(jù)集涵蓋700多項(xiàng)任務(wù),由13臺(tái)機(jī)器人在17個(gè)月內(nèi)收集而成。也就是說,RT-1大模型可以讓單一機(jī)器人,學(xué)習(xí)其他機(jī)器人在過去積攢的經(jīng)驗(yàn),從而具備相應(yīng)的能力。
RT-1大模型論文
當(dāng)時(shí),谷歌讓搭載RT-1的機(jī)器人進(jìn)行一系列復(fù)雜操作,包括拾取和放置物品、打開和關(guān)閉抽屜、將物品放入和取出抽屜、將細(xì)長的物品直立放置、敲倒物體、拉出餐巾紙和打開罐子。據(jù)團(tuán)隊(duì)稱,RT-1以97%的成功率執(zhí)行了700多個(gè)訓(xùn)練指令,并且可以泛化到新的任務(wù)。
但對(duì)于沒有具體學(xué)習(xí)過的場(chǎng)景,RT-1還是很難自主依據(jù)推理完成任務(wù)。根據(jù)測(cè)試,它在不熟悉的場(chǎng)景下,操作的準(zhǔn)確率只有32%。
如果說當(dāng)時(shí)的RT-1還是個(gè)“教什么學(xué)什么”的小學(xué)生,RT-2則進(jìn)步成了能夠舉一反三的初高中生。在沒見過的新場(chǎng)景中,RT-2的性能表現(xiàn)幾乎翻了一番,從RT-1的32%提高到了62%,而此時(shí)距離RT-1的發(fā)布時(shí)間僅僅過去了半年多。
谷歌DeepMind機(jī)器人技術(shù)主管Vincent解釋,RT-2建立在RT-1模型的基礎(chǔ)上,消除了一些復(fù)雜性;使單個(gè)模型不僅能夠執(zhí)行基礎(chǔ)模型中看到的復(fù)雜推理,而且還可以輸出機(jī)器人動(dòng)作。最重要的是,它表明在少量的機(jī)器人訓(xùn)練數(shù)據(jù)下,該系統(tǒng)就能夠?qū)⑵湔Z言和視覺訓(xùn)練數(shù)據(jù)中嵌入的概念轉(zhuǎn)變?yōu)橹笇?dǎo)機(jī)器人行為,即使是從未接受過訓(xùn)練的任務(wù)。“簡而言之,RT-2的能力在于將信息轉(zhuǎn)化為行動(dòng),這顯示了其快速適應(yīng)新環(huán)境和情況的潛力?!?/p>
得益于大模型的快速進(jìn)步,機(jī)器人產(chǎn)業(yè)迎來了質(zhì)變,按照谷歌的迭代速度,或許明年就能看到更強(qiáng)大的RT-3。
研究機(jī)器人的不止谷歌,特斯拉也對(duì)機(jī)器人興趣濃厚。今年5月,特斯拉發(fā)布了一個(gè)視頻,5個(gè)人形機(jī)器人在工廠中直立行走,它們裝備了很多傳感器,能夠探測(cè)周圍環(huán)境,執(zhí)行分揀物品等任務(wù)。特斯拉的機(jī)器人也在走AI路線,這家電動(dòng)汽車廠商的CEO馬斯克稱,特斯拉正在嘗試打通電動(dòng)汽車的輔助駕駛軟件(FSD)系統(tǒng)和人形機(jī)器人的底層模塊,讓機(jī)器人智商在線。
而倘若后續(xù)特斯拉機(jī)器人能夠接入RT-2甚至更高級(jí)的大模型,機(jī)器人的能力預(yù)計(jì)又將大幅進(jìn)步。
但越來越聰明的機(jī)器人,也加劇了人們對(duì)AI失控的擔(dān)憂。大模型的軟件應(yīng)用可能會(huì)在網(wǎng)絡(luò)學(xué)習(xí)中操控人類的思想、輿論,金屬外殼的人形機(jī)器人直接具備了物理殺傷力。
有人在社交媒體發(fā)問,“人類是否親手打開了一個(gè)潘多拉魔盒?”
如何規(guī)訓(xùn)機(jī)器人,仍然回到了大模型安全性這一老問題上,但這個(gè)問題至今還未在全球的研究與應(yīng)用領(lǐng)域達(dá)成共識(shí)。
技術(shù)另一面的未知危機(jī)仍未解除,裝上AI大腦的機(jī)器人出現(xiàn)了,你會(huì)期待還是警惕?
作者:凱爾,編輯:文刀
來源公眾號(hào):元宇宙日爆(ID:yuanyuzhouribao),在這里,看見未來。
本文由人人都是產(chǎn)品經(jīng)理合作媒體 @元宇宙日爆 授權(quán)發(fā)布,未經(jīng)許可,禁止轉(zhuǎn)載。
題圖來自Unsplash,基于 CC0 協(xié)議
該文觀點(diǎn)僅代表作者本人,人人都是產(chǎn)品經(jīng)理平臺(tái)僅提供信息存儲(chǔ)空間服務(wù)。
- 目前還沒評(píng)論,等你發(fā)揮!