烏蘭牧騎的“時光明信片”
在內蒙古有一支紅色文藝工作隊“烏蘭牧騎”從1957年第一支烏蘭牧騎成立至今內蒙古已成立75支烏蘭牧騎共3500多名隊員他們植根草原 從人民中來 到
9月21日,PICO展示近期遭泄露的新手柄,并對外發布了其自研的Centaur多模態融合追蹤算法。
如前期諜照所示,PICO新手柄去掉了外圍燈環的設計,并且沒有額外增加傳感器。據PICO官方透露,相比上一代手柄,新手柄重量減輕了約15g,高度減小了50%,并且還優化了內部電池和馬達的位置,使其重心更靠近手心,握持手感更好,且兼具細膩振感。
通常,去掉包含LED燈的追蹤燈環,勢必會降低手柄的追蹤精度和穩定性。而PICO全新自研的Centaur多模態融合算法,融合了光學追蹤算法和CV模態手柄追蹤算法,讓手柄在LED燈減少或處于盲區的背景下,也能實時、有效追蹤。
自研Centaur多模態融合追蹤算法
VR設備的輕量化和小型化,一直是XR行業探索和努力的方向。
基于當前行業主流的“光學追蹤+慣性導航系統”追蹤方案,開發無燈環手柄會面臨兩大技術難點:首先,減少LED燈的數量,會影響光學追蹤的穩定性;其次,更少的LED觀測數量,會增大手柄初始化與追蹤解算難度。但如果在手柄上增加新的傳感器,這又會提升造價成本,并增加手柄的耗電速率。
*PICO 4系列手柄與PICO 全新研發的無燈環手柄
PICO全新自研的Centaur多模態融合追蹤算法,將光學追蹤算法和CV模態手柄追蹤算法進行了有效融合。這不僅解決了無燈環手柄「識別難」的問題,也為XR行業的追蹤交互提供了新的思路。頭顯既能通過光學追蹤算法識別手柄上LED燈發出的紅外光,還能夠在LED燈被手部遮擋時,通過CV模態追蹤算法識別裸手的特征,從而準確還原出手柄控制器的6DoF信息。兩大算法結合手柄本身具備的慣性導航系統,使得新手柄無需增加新的傳感器,也能實現穩定、精準的追蹤。
創新技術研發思路
為了率先實現Centaur多模態追蹤算法的產品化,PICO組建了跨部門的攻關小組,包括手柄追蹤算法團隊、裸手追蹤算法團隊和交互數據團隊。經過多次論證后,最終實現了一套基于神經網絡的多模態手柄追蹤框架,其融合了慣性測量單元(IMU)、光學傳感器和手部圖像信息。
* PICO Centaur多模態融合算法 模型
在框架設計中,手柄追蹤算法團隊負責提升光學追蹤的穩定性,并搭建算法框架;裸手追蹤算法團隊設計了SOTA端到端的6DoF位姿估計模型,提升手部追蹤的穩定性;而交互數據團隊則通過自研多源三維數據采集設備與高精重建算法,提供大量標注數據。
這樣的追蹤系統,不僅能基于紅外 LED 實現高精度追蹤,還能夠利用裸手檢測“隔山打牛”。為了驗證效果,PICO還聯合極客玩家進行了極限測試,在音游、游動健身等對追蹤精度要求極高的場景下,該算法的追蹤效果都可媲美PICO 4的HyperSense振感手柄。
搭建全方位自研體系
PICO Centuar多模態追蹤算法的推出,得益于PICO在兩大核心算法上的技術積累。PICO Neo3和PICO 4兩代產品的打磨,幫助PICO 在光學追蹤領域積累了扎實的技術。與此同時,PICO 在裸手追蹤上也持續探索,相關技術已位列全球第一梯隊。PICO通過不斷優化端到端的時序模型、千萬級高精訓練集以及MTP延遲測試方案,在算法延遲與追蹤丟失率方面實現技術突破,在游戲、運動等快速甩動手柄的場景下,給用戶帶來流暢且穩定的體驗。
而這些技術創新背后,是PICO獨立自研的高精度數據平臺,以及專業的測試平臺。
比如為了生產更符合開發需求的高精度裸手姿態數據,PICO一方面采用了業內領先的基于相機陣列的自研多視角手部姿態標注技術,另一方面針對該特定任務進行預重建,進一步提升手部姿態數據的精度。這無疑為算法的訓練,提供了強大的支撐和助力。
*PICO多模態同步相機系統 采集高精度數據
近期,PICO交互數據實驗室團隊的研究發現,被國際頂級會議ICCV 2023成功收錄,包含了一篇Oral論文和三篇會議論文。這些涉及高效數據獲取、高精度數據標注、數據應用等方面的實踐研究,也代表了國際計算機視覺領域的最新成果。
*PICO交互數據實驗室的研究成果,被國際頂級會議ICCV 2023收錄
作為全球領先的XR品牌,PICO 憑借前瞻性的技術意識和充分的技術積累,創新研發了多模態的融合追蹤算法,為行業AI交互提供了全新思路,也進一步助推了手柄的輕量化,為用戶提供更符合人體工學,且兼具細膩振感的交互體驗。
舉報 0收藏 0打賞 0評論 0分享 0
更多>同類資訊
聚焦虛擬制作新場景，打造商用顯示新未來：三星The Wall IVC系列新品上市，繼續擴大在虛擬制作領域的領先優勢
VP(Vritual Production)是指在虛擬攝影棚通過LED顯示屏動態模擬各類場景背景的新一代影視制作技術。相比較于傳統的影視制作方法，這種技術達到了真正意義上的“所見即所得”式拍攝，可以為實景提供高還原度的動態環境光照，為主創人員帶來逼真的沉浸式拍攝體驗，極大優
09-21
量子位「MEET 2024智能未來大會」要來了！還有份年度評選等你參與
組委會 發自 凹非寺量子位 | 公眾號 QbitAI新起點!這就是2023年智能變革、科技日新的集中感嘆。因為這一年來，所有科技公司仿佛都站到了一個新起點，圍繞著生成式AI摩拳擦掌，力圖的就是一個變革。而當大熱潮回歸冷靜期，“余溫”下的科技企業們也不得不直面一個現實且
09-21
近在咫尺的品質服務，聯想服務讓您暢享無憂
金秋9月接近尾聲，期待的小長假即將來臨，聯想服務“職場福音計劃”也正式亮相。來酷直營門店服務全新升級，您將享受到線下線上的優質臻心服務，為您帶來貼心舒適的服務體驗。此外，在國慶小長假期間，聯想還準備了超多假期好禮和活動禮遇與您共度一個愉快的假期?？靵?span style="display:none">6LD28資訊網——每日最新資訊28at.com
09-21
讓攝影修圖成為享受！5K專業顯示有什么特別魅力？
修圖對于攝影師來說，是一件非常享受的事情，在大屏幕上看著自己的攝影作品，朝著理想效果一步步變化，確實非常開心和滿足。但色彩不準、精度不夠的顯示器會降低這種修圖體驗感，甚至改變攝影創作方向。狼族攝影也多次為大家介紹過專業攝影顯示器知識，讓大家明白了顯示
09-21
進階由外至內 三星Galaxy Z Fold5帶來先鋒折疊屏體驗
在過去的四年里，三星Galaxy Z Fold系列折疊屏手機以其獨特設計和卓越性能，一直在市場中占據著主導地位，并通過不斷革新的體驗，加速人們生活方式升級。如今，三星新一代折疊屏旗艦Galaxy Z Fold5憑借領先的工業設計能力、深入場景的軟硬件升級，實現了由外至內的全面
09-21
心系天下三星W24：以創新科技書寫美之大成
自古至今，無論對于人還是器物來說，“內外兼修”都是值得稱道的典范標準，這也是心系天下三星W系列的十六代傳承之本。自誕生之初，心系天下三星W系列就始終兼顧外在美學享受與內在科技力量，日前問世的新品心系天下三星W24，更是集前十五代產品之大成，以陶瓷工藝和精
09-21
TVP專家談騰訊云 Cloud Studio：開啟云端開發新篇章
導語 | 近日，由騰訊云 TVP 團隊傾力打造的 TVP 吐槽大會第六期「騰訊云 Cloud Studio」專場圓滿落幕，6 位資深的 TVP 專家深度體驗騰訊云 Cloud Studio 產品，提出了直擊痛點的意見與建議，同時也充分肯定了騰訊云 Cloud Studio 的實力與價值，幫助騰訊云 Cloud Studio
09-21
usmile笑容加發布F10系列新品，打造數字化口腔健康解決方案
9月20日，usmile笑容加召開「再顛覆 再進化」電動牙刷告別會暨數字牙刷新品發布會，正式推出行業首款數字牙刷F10系列新品。作為全球首款搭載“軟硬件技術體系”的數字牙刷，F10系列將為用戶帶來市面上科技感更強、體驗感更好的革新體驗。以智慧芯片為技術內核、強大算力
09-21
最美逆行、城市建設…寶藏商家讓世界向美好更進一步
時代向前，中小企業在壯大自身、經營發展過程中也不斷發生著變化，越來越多的企業日益關注到創造社會價值的重要意義，將利潤追求與社會責任相結合，為商業行為注入正能量?！耙蛄x而利、商業向善”成為眾多企業的一條重要經營理念。隨著“了不起的改變”百度愛采購明星企
09-21
貼心牙齒“護理師”，可菲可麗潔白沖牙器5大模式潔齒更護齦
上周陪朋友去種牙，看著大幾千一顆牙的價格，我陷入了沉思。朋友說后悔沒好好保護牙齒，牙被齲壞了只能花大價錢來種，我看著也只能替她惋惜。朋友的前車之鑒，也讓我開始重視口腔健康。其實我的牙齒狀況也不是很樂觀，不僅牙黃、口氣大不說，去年還補了牙，醫生囑咐我多
09-21
共建數字廣西，共赴數智未來！2023廣西鯤鵬昇騰人工智能產業生態大會成功舉辦
9月19日，由南寧市大數據發展局主辦，華為技術有限公司、南寧產業投資集團有限責任公司共同承辦的“2023廣西鯤鵬昇騰人工智能產業生態大會”在南寧成功舉辦。自治區大數據發展局二級巡視員楊儉，華為全球數據中心Marketing與解決方案總裁邱峰，廣西壯族自治區信息中心副
09-21
華為平板十年全球發貨量超1億臺，十年大作即將開售
2023年9月19日，華為官方發布了全新HUAWEI MatePad Pro 13.2''預熱海報，并預告這款13.2英寸旗艦新品將于9月25日在華為秋季全場景新品發布中亮相。新品海報中HUAWEI MatePad Pro 13.2''被三指輕松握持，并配文“十年大作，‘巨幕’登場”。不難看出，此
09-21
神州數碼攜全棧創新智算基礎設施解決之道，論道亞布力智能制造發展論壇
9月20日，以“智能制造與高質量發展”為主題，2023世界制造業大會——2023亞布力智能制造發展論壇成功舉辦。作為論壇承辦單位之一，神州數碼攜旗下神州鯤泰，與眾多企業家一道共赴“江淮之約”，共同把脈“科技創新與中國智造”，并首度解析神州鯤泰“創新智算基礎設施
09-21
WMC2023第二屆世界元宇宙大會在上海開幕
2023年9月20日，以“虛實相生，產業賦能”為主題的WMC2023第二屆世界元宇宙大會在上海安亭隆重舉行。大會由中國仿真學會、中國指揮與控制學會和北京理工大學共同主辦，上海市嘉定區安亭鎮人民政府和中國仿真學會元宇宙專業委員會共同承辦。工業和信息化部科技司副司長任
09-20
“信息技術創新榜”網站正式上線，助推我國信息技術高質量發展
9月15日，在與2023世界計算大會同期舉辦的“信息技術產品供應鏈論壇”上，工業和信息化部電子第五研究所(簡稱“工信部五所”)宣布賽寶優選“信息技術創新榜”網站正式上線運行。該網站旨在通過“以評促優、以評促強”的提質增效模式，幫助信息技術創新企業提高產品質量
本文鏈接：http://www.tebozhan.com/showinfo-28-1048-0.html自研多模態追蹤算法，PICO 為「手柄小型化」找到新思路你都知道哪些？
聲明：本網頁內容旨在傳播知識，若有侵權等問題請及時與本網聯系，我們將在第一時間刪除處理。郵件：2376512515@qq.com
Copyright ? 2016-2023 天津谷騏科技有限公司 版權所有 sitemap.xml
違法及侵權請聯系：2376512515@qq.com 津ICP備18001702號
津公網安備 12010102000574號
