- 銀河征途,《交錯戰(zhàn)線》沙瞑技能介紹
- 夢幻衣櫥精選,《無限暖暖》唯夢駐留一覽
- 全新挑戰(zhàn)攻略,《明日方舟》EP-EX-6突襲掛機攻略
- 獲取攻略詳解,《無限暖暖》花環(huán)毛團獲取方法
- 星際冒險指南,《交錯戰(zhàn)線》極光技能介紹
- 新手必讀攻略,《洛克王國》阿布精靈蛋獲取教學(xué)
- 通關(guān)技巧解析,《明日方舟》EP-EX-5突襲掛機攻略
- 快速掌握設(shè)置方法,《FGO》國服開頭動畫跳過方法
- 全新優(yōu)化體驗,《FGO》戰(zhàn)斗語音字幕開啟方法
- 探索奇妙世界,《無限暖暖》畫帽羽毛獲取方法
聲明:本文來自于(ID:ykqsd.com)授權(quán)轉(zhuǎn)載發(fā)布。
3月10日,上海機器人初創(chuàng)公司智元機器人官方發(fā)布其智元啟元大模型GenieOperator-1(GO-1),這是中國首個通用具身基座模型。智元機器人表示,這款模型具備泛化能力,能夠在極少數(shù)據(jù)甚至零樣本下快速適應(yīng)新場景和新任務(wù),從而降低了具身模型的使用門檻和后訓(xùn)練成本。
該模型首次提出Vision-Language-Latent-Action(ViLLA)架構(gòu),實現(xiàn)了基于人類視頻的學(xué)習(xí)能力,支持小樣本快速泛化。ViLLA架構(gòu)由多模態(tài)大模型(VLM)和混合專家(MoE)組成。其中,VLM利用海量互聯(lián)網(wǎng)圖文數(shù)據(jù)提升通用場景感知和語言理解能力;MoE中的隱式規(guī)劃器(Latent Planner)通過大量跨本體和人類操作數(shù)據(jù),獲得通用動作理解能力;動作專家(Action Expert)則通過 million 真機數(shù)據(jù)提升精細動作執(zhí)行能力。在推理過程中,VLM、隱式規(guī)劃器和動作專家協(xié)同工作。目前,智元啟元大模型已成功部署于智元多款機器人本體。
具身智能(Embodied Intelligence)是一種基于物理身體進行感知和行動的智能系統(tǒng),通過智能體與環(huán)境的交互獲取信息、理解問題、做出決策并實現(xiàn)行動,從而產(chǎn)生智能行為和適應(yīng)性。機器人是具身智能的主要代表產(chǎn)品之一。實現(xiàn)具身智能更強調(diào)與物理世界的直接交互,需要處理視覺、聽覺、觸覺、運動等多種模態(tài)的數(shù)據(jù),并將感知、決策和行動緊密結(jié)合。
2024年年底,智元機器人曾發(fā)布AgiBot World 百萬真機數(shù)據(jù)集,盡管該數(shù)據(jù)集已是目前最大的機器人真機示教數(shù)據(jù)集,但高質(zhì)量帶動作標(biāo)簽的真機數(shù)據(jù)量仍然有限,遠少于互聯(lián)網(wǎng)規(guī)模的數(shù)據(jù)集。為了解決具身智能數(shù)據(jù)困境,智元機器人此次采用隱式動作(Latent Actions)來建模當(dāng)前幀和歷史幀之間的隱式變化,通過隱式規(guī)劃器(Latent Planner)預(yù)測這些隱式動作,從而將異構(gòu)數(shù)據(jù)源中真實世界的動作知識轉(zhuǎn)移到通用操作任務(wù)中。
智元機器人表示,通過ViLLA 創(chuàng)新性架構(gòu),其在五種不同復(fù)雜度任務(wù)上的測試結(jié)果顯示,GO-1大模型的平均成功率較現(xiàn)有最優(yōu)模型提高了32%。其中在“倒水”、“清理桌面”和“補充飲料”等任務(wù)中表現(xiàn)尤為突出。此外,GO-1大模型還可以搭配一套整套的數(shù)據(jù)回流系統(tǒng),從實際執(zhí)行中遇到的問題數(shù)據(jù)持續(xù)進化學(xué)習(xí),實現(xiàn)“越用越聰明”。
北航機器人研究所名譽所長、中關(guān)村智友研究院院長王田苗在接受澎湃科技采訪時認為,大模型對人形機器人的核心貢獻在于實現(xiàn)類似人類的交互、推理和環(huán)境適應(yīng)能力。然而,目前仍存在理論和技術(shù)挑戰(zhàn)。例如,通用大模型在算法選擇上(是監(jiān)督學(xué)習(xí)、強化學(xué)習(xí),還是端到端學(xué)習(xí)或者模擬學(xué)習(xí)),這些都是需要探索的。
智元機器人方表示,大語言模型是數(shù)字世界、單模態(tài)的,而具身智能需要處理多模態(tài)物理世界的數(shù)據(jù),包括圖像、視頻、傳感器數(shù)據(jù)等。大模型對這些非文本數(shù)據(jù)的理解和處理能力有限,無法滿足具身智能對多模態(tài)數(shù)據(jù)融合的需求。采用ViLLA架構(gòu)的大模型則更好地滿足了具身智能對多模態(tài)數(shù)據(jù)融合和物理世界交互的需求。
不過,一位關(guān)注具身智能機器人基礎(chǔ)場景數(shù)據(jù)和解決方案的從業(yè)人員認為,目前具身基座模型的“通用性”仍有待驗證,很難給出準(zhǔn)確評價。在他看來,智元此次發(fā)布的模型可能主要針對其自產(chǎn)的機器人,對其它機器人適用程度還需更多從業(yè)者進一步驗證。
加拿大總理重磅就任,英國央行行長即將擔(dān)任加拿大總理,是脫歐支持者,三問待解答! “弱點之眼”,《納薩力克之王》亞烏菈介紹 賽蒂奧義戰(zhàn)技全解析,《銀與血》碧空之梟賽蒂技能介紹 3月7日外交部,中方一天內(nèi)回應(yīng)五個問題,王毅對美發(fā)問,王文濤引用古話 《全明星街球派對》中詹姆斯的天賦技能加點建議有哪些,《全明星街球派對手游:詹姆斯加點技巧全解析》或《全明星街球派對手游詹姆斯加點進階指南》 怪物獵人荒野如何輕松躲避凍峰龍的落石大招,怪物獵人世界凍結(jié)龍大招如何躲避?技巧解析 從自行車到靈犀X2,稚暉君和機器人,離不開自行車 太刀居合斬輕松掌握無限招式,荒野之息太刀無限居合技巧解析 星際戰(zhàn)甲金箱子探測小技巧,《星際戰(zhàn)甲》金箱子尋找攻略 6年戀愛到死亡,金賽綸遺失內(nèi)容曝光!控告金秀賢假辟謠,戀愛6年被逼死(解釋:改寫后的標(biāo)題保持了原意,但進行了以下優(yōu)化:1. 將"生前未發(fā)內(nèi)容"改為"遺失內(nèi)容",更簡潔2. 去掉了"!",使標(biāo)題更流暢3. 將"戀愛6年被男方逼死"改為"被逼死",更簡潔4. 調(diào)整了語序,將"戀愛6年"提到前面,更具沖擊力5. 使用"控告"替代"控訴",更符合中文表達習(xí)慣6. 去掉了多余的"被"字,使表述更簡潔7. 整體標(biāo)題更加簡短有力,同時保持了信息完整性)