AVt天堂网 手机版,亚洲va久久久噜噜噜久久4399,天天综合亚洲色在线精品,亚洲一级Av无码毛片久久精品

當(dāng)前位置：首頁 > 元宇宙 > AI

提升機(jī)器人 3D 操作能力，北京大學(xué)與智元機(jī)器人聯(lián)合實(shí)驗(yàn)室發(fā)布 OmniManip

來源： 責(zé)編： 時(shí)間：2025-01-25 09:32:39 33觀看
導(dǎo)讀 1 月 23 日消息，如何將視覺語?基礎(chǔ)模型（Vision Language Models, VLMs）應(yīng)?于機(jī)器?以實(shí)現(xiàn)通?操作是具身智能領(lǐng)域的?個(gè)核?問題，這??標(biāo)的實(shí)現(xiàn)受兩?關(guān)鍵挑戰(zhàn)制約：VLM 缺少精確的 3D 理解能?：通過對(duì)?學(xué)習(xí)范式

1 月 23 日消息，如何將視覺語?基礎(chǔ)模型（Vision Language Models, VLMs）應(yīng)?于機(jī)器?以實(shí)現(xiàn)通?操作是具身智能領(lǐng)域的?個(gè)核?問題，這??標(biāo)的實(shí)現(xiàn)受兩?關(guān)鍵挑戰(zhàn)制約：Cy428資訊網(wǎng)——每日最新資訊28at.com

VLM 缺少精確的 3D 理解能?：通過對(duì)?學(xué)習(xí)范式訓(xùn)練、僅以 2D 圖像 / ?本作為輸?的 VLM 的天然局限；Cy428資訊網(wǎng)——每日最新資訊28at.com

?法輸出低層次動(dòng)作：將 VLM 在機(jī)器?數(shù)據(jù)上進(jìn)?微調(diào)以得到視覺 - 語? - 動(dòng)作（VLA）模型是?種有前景的解決?案，但?前仍受到數(shù)據(jù)收集成本和泛化能?的限制。Cy428資訊網(wǎng)——每日最新資訊28at.com

Cy428資訊網(wǎng)——每日最新資訊28at.com

上海智元新創(chuàng)技術(shù)有限公司官方今日發(fā)文稱，北?攜?智元機(jī)器?團(tuán)隊(duì)提出 OmniManip 架構(gòu)，基于以對(duì)象為中?的 3D 交互基元，將 VLM 的高層次推理能力轉(zhuǎn)化為機(jī)器?的低層次高精度動(dòng)作。Cy428資訊網(wǎng)——每日最新資訊28at.com

針對(duì)?模型幻覺問題和真實(shí)環(huán)境操作的不確定性，OmniManip 引?了 VLM 規(guī)劃和機(jī)器?執(zhí)?的雙閉環(huán)系統(tǒng)設(shè)計(jì)，實(shí)現(xiàn)了操作性能突破。目前項(xiàng)?主?與論?已上線，代碼與測試平臺(tái)即將開源。Cy428資訊網(wǎng)——每日最新資訊28at.com

Cy428資訊網(wǎng)——每日最新資訊28at.com

從智元機(jī)器人官方獲悉，OmniManip 的關(guān)鍵設(shè)計(jì)包括：Cy428資訊網(wǎng)——每日最新資訊28at.com

基于 VLM 的任務(wù)解析：利? VLM 強(qiáng)?的常識(shí)推理能?，將任務(wù)分解為多個(gè)結(jié)構(gòu)化階段（Stages），每個(gè)階段明確指定了主動(dòng)物體（Active）、被動(dòng)物體（Passive）和動(dòng)作類型（Action）。Cy428資訊網(wǎng)——每日最新資訊28at.com

以物體為中?的交互基元作為空間約束：通過 3D 基座模型?成任務(wù)相關(guān)物體的 3D 模型和規(guī)范化空間（canonical space），使 VLM 能夠直接在該空間中采樣 3D 交互基元，作為 Action 的空間約束，從?優(yōu)化求解出 Active 物體在 Passive 物體規(guī)范坐標(biāo)系下的?標(biāo)交互姿態(tài)。Cy428資訊網(wǎng)——每日最新資訊28at.com

閉環(huán) VLM 規(guī)劃：將?標(biāo)交互姿態(tài)下的 Active / Passive 物體渲染成圖像，由 VLM 評(píng)估與重采樣，實(shí)現(xiàn) VLM 對(duì)?身規(guī)劃結(jié)果的閉環(huán)調(diào)整。Cy428資訊網(wǎng)——每日最新資訊28at.com

閉環(huán)機(jī)器?執(zhí)?：通過物體 6D 姿態(tài)跟蹤器實(shí)時(shí)更新 Active / Passive 物體的位姿，轉(zhuǎn)換為機(jī)械臂末端執(zhí)?器的操作軌跡，實(shí)現(xiàn)閉環(huán)執(zhí)?。Cy428資訊網(wǎng)——每日最新資訊28at.com

此外，OmniManip 具備通?泛化能?，不受特定場景和物體限制。團(tuán)隊(duì)已將其應(yīng)?于數(shù)字資產(chǎn)?動(dòng)標(biāo)注 / 合成管道，實(shí)現(xiàn)?規(guī)模的機(jī)器?軌跡?動(dòng)采集。該研究團(tuán)隊(duì)將開源泛化操作?規(guī)模數(shù)據(jù)集和對(duì)應(yīng)的仿真評(píng)測基準(zhǔn)。Cy428資訊網(wǎng)——每日最新資訊28at.com

據(jù)此前報(bào)道，以“天才少年”身份加入華為的稚暉君于 2022 年底宣布離職，創(chuàng)業(yè)智元機(jī)器人。2024 年 9 月 3 日，智元機(jī)器人完成 A++++++ 輪融資，估值已超過 70 億元，得到了包括北汽、上汽、比亞迪在內(nèi)的國內(nèi)汽車巨頭支持。Cy428資訊網(wǎng)——每日最新資訊28at.com

目前，智元機(jī)器人量產(chǎn)的第 1000 臺(tái)通用具身機(jī)器人已于本月（1 月 6 日）正式下線，其中包括 731 臺(tái)雙足人形機(jī)器人（遠(yuǎn)征 A2 / 靈犀 X1）和 269 臺(tái)輪式通用機(jī)器人（遠(yuǎn)征 A2-D / A2-W）。Cy428資訊網(wǎng)——每日最新資訊28at.com

Cy428資訊網(wǎng)——每日最新資訊28at.com

本文鏈接：http://www.tebozhan.com/showinfo-45-10143-0.html提升機(jī)器人 3D 操作能力，北京大學(xué)與智元機(jī)器人聯(lián)合實(shí)驗(yàn)室發(fā)布 OmniManip

聲明：本網(wǎng)頁內(nèi)容旨在傳播知識(shí)，若有侵權(quán)等問題請(qǐng)及時(shí)與本網(wǎng)聯(lián)系，我們將在第一時(shí)間刪除處理。郵件：2376512515@qq.com

上一篇： 法國 AI 初創(chuàng)企業(yè) Mistral 首席執(zhí)行官稱該公司不會(huì)出售，計(jì)劃 IPO

下一篇： 自主操作電腦的多模態(tài) Agent 升級(jí)，智譜 GLM-PC 開放體驗(yàn)

標(biāo)簽：
  • 熱門焦點(diǎn)

  • AI網(wǎng)紅能年賺百萬，普通人的新機(jī)會(huì)來了？

    來源｜運(yùn)營研究社作者 | 張知白編輯 | 楊佩汶設(shè)計(jì) | 晏談夢(mèng)潔2023 年 ，數(shù)字人成為了當(dāng)紅的“流量話題”和“商業(yè)機(jī)會(huì)"。不管是 AI 孫燕姿走紅網(wǎng)絡(luò)，還是 AI 數(shù)字

  • “虛擬人”角斗場，基于“硬實(shí)力”下的人性平衡法則？

    在打工人“反內(nèi)卷”的當(dāng)下，一眾虛擬人卻“內(nèi)卷”了起來。從北京春晚虛擬人蘇小妹與劉宇演繹歌舞《星河入夢(mèng)》，央美畢業(yè)的虛擬人夏語冰登上央視節(jié)目《對(duì)話》，湖南

  • “我沒搞懂元宇宙，但一天能賺9w塊”

    作者：鄭宇軒最近幾個(gè)月，“元宇宙”爆火，除了 Facebook 改名為 Meta 高調(diào)進(jìn)軍元宇宙外， BAT 為代表的大廠紛紛著手“元宇宙”新業(yè)務(wù)。剎那之間，元宇宙成為新風(fēng)口，除了

  • 與元宇宙美少女藝術(shù)家的對(duì)話

    我最近宣布了我自己的NFT項(xiàng)目，這是我已經(jīng)工作了幾個(gè)月的事情。由于我之前只是一個(gè)收藏家，擁有自己的項(xiàng)目真的給了我一個(gè)新的視角來看待這個(gè)領(lǐng)域。我一直歡迎人們

  • 音樂家如何利用NFTs來提高歌迷參與度

    "音樂是一種語言，不以特定的文字說話。它用情感說話，如果它在骨子里，它就在骨子里。" - Keith Richards音樂激勵(lì)著我們，使我們流淚，使我們充滿狂喜，并撫慰我們的靈魂

  • GameFi 深度解析，元宇宙內(nèi)容雛形顯現(xiàn)

    GameFi=Game（游戲）+Defi（去中心化金融），核心特點(diǎn)為“Play to Earn”。通過技術(shù)與去中心化價(jià)值觀賦能，GameFi 游戲資產(chǎn)化身為NFT 和代幣上鏈，具備了可驗(yàn)證性和流通性；開

  • MR——元宇宙平臺(tái)的下一代入口

    作為“元宇宙”的領(lǐng)頭羊，Meta的一舉一動(dòng)都受到業(yè)內(nèi)的高度關(guān)注。華爾街見聞提及，2月17日周四，F(xiàn)acebook母公司Meta在透露，其混合現(xiàn)實(shí)技術(shù)（MR）將在幾年后實(shí)現(xiàn)，讓人們對(duì)元

  • Steam 禁止NFT和加密貨幣原因曝光

    近日，Valve（V社）總裁Gabe Newell接受PC Gamer采訪時(shí)解釋了該平臺(tái)禁止NFT和加密貨幣的原因。早在2021年10月18日，PC Gamer就報(bào)道Steam推出的新規(guī)：使用區(qū)塊鏈或允許交

  • NFT行業(yè)周報(bào)：NBA巨星勒布朗·詹姆斯申請(qǐng)NFT相關(guān)商標(biāo)

    1. “無聊猿”BAYC交易總額突破14億美元3月10日，據(jù)DappRader最新數(shù)據(jù)顯示，“無聊猿”Bored Ape Yacht Club（BAYC）交易總額已突破14億美元，創(chuàng)下歷史新高，本文撰寫時(shí)為
Top