(資料圖)
IT之家 3 月 8 日消息,周一,來自谷歌和柏林工業大學的一組人工智能研究人員推出了史上最大的視覺語言模型 ——PaLM-E,參數量高達 5620 億(GPT-3 的參數量為 1750 億)。
PaLM-E 是迄今為止已知的最大 VLM(視覺語言模型)。作為一種多模態具身 VLM,它不僅可以理解圖像,還能理解、生成語言,執行各種復雜的機器人指令而無需重新訓練。它還展示出了強大的涌現能力(模型有不可預測的表現)。
據谷歌稱,當得到一個高級命令,如“把抽屜里的米片拿給我”,PaLM-E 可以為帶有手臂的移動機器人平臺(由谷歌機器人公司開發)生成一個行動計劃,并自行執行這些行動。
PaLM-E 通過分析來自機器人攝像頭的數據來實現這一目標,而無需對場景進行預處理。這消除了人類對數據進行預處理或注釋的需要,使機器人控制更加自主。
PaLM-E 還很有彈性,能夠對環境做出反應。例如,PaLM-E 模型可以引導機器人從廚房里拿一袋薯片,由于 PaLM-E 集成到了控制回路中,它對任務中可能發生的中斷有了抵抗力。在一個視頻例子中,一名研究人員從機器人手中抓起薯片并移動它們,但機器人找到了薯片并再次抓起它們。
另外,PaLM-E 模型也可控制機器人自主完成原需人類指導的復雜任務。除了機器人技術外,谷歌研究人員還觀察到使用大型語言模型作為 PaLM-E 核心的幾個有趣效果,其中一個是 PaLM-E 能表現出“正向轉移”,這意味其可將從一個任務中學到的知識和技能轉移到另一個任務中,相較單任務機器人模型能有更好的表現。
谷歌研究人員計劃未來將探索 PaLM-E 在現實世界中有更多應用,例如家庭自動化或工業機器人,也希望 PaLM-E 能夠激發更多關于多模態 AI 的應用。
IT之家曾報道,身為谷歌 AI 勁敵的微軟近期也發表了「ChatGPT for Robotics」的論文,以類似的方式結合視覺數據和大型語言模型來控制機器人。
關鍵詞:
新聞發布平臺 |科極網 |環球周刊網 |中國創投網 |教體產業網 |中國商界網 |互聯快報網 |萬能百科 |薄荷網 |資訊_時尚網 |連州財經網 |劇情啦 |5元服裝包郵 |中華網河南 |網購省錢平臺 |海淘返利 |太平洋裝修網 |勵普網校 |九十三度白茶網 |商標注冊 |專利申請 |啟哈號 |速挖投訴平臺 |深度財經網 |深圳熱線 |財報網 |財報網 |財報網 |咕嚕財經 |太原熱線 |電路維修 |防水補漏 |水管維修 |墻面翻修 |舊房維修 |參考經濟網 |中原網視臺 |財經產業網 |全球經濟網 |消費導報網 |外貿網 |重播網 |國際財經網 |星島中文網 |上甲期貨社區 |品牌推廣 |名律網 |項目大全 |整形資訊 |整形新聞 |美麗網 |佳人網 |稅法網 |法務網 |法律服務 |法律咨詢 |媒體采購網 |聚焦網 |參考網 |熱點網
亞洲資本網 版權所有
Copyright © 2011-2020 亞洲資本網 All Rights Reserved. 聯系網站:55 16 53 8 @qq.com