8月26日,2023 Rokid Jungle發(fā)布會(huì)在杭州未來科技城國際會(huì)議中心召開。會(huì)上,杭州靈伴科技(Rokid)率先發(fā)布了消費(fèi)級OST(Optical See Through)個(gè)人空間計(jì)算平臺Rokid AR Studio。與此同時(shí),企業(yè)事業(yè)群發(fā)布了針對工業(yè)端“3+3+N”的產(chǎn)品生態(tài)架構(gòu),通過空間計(jì)算打造超級工廠。
杭州靈伴科技(Rokid)創(chuàng)始人、CEO祝銘明在發(fā)布會(huì)上表示:“我們希望帶給用戶體驗(yàn)更極致、更輕便的空間計(jì)算產(chǎn)品,讓空間計(jì)算能更自然地融入日常生活和工作。”
微手勢 真AR
引領(lǐng)OST方向的AR進(jìn)化路徑
相較之前的AR產(chǎn)品,杭州靈伴科技(Rokid)在人機(jī)交互方面具有突破性進(jìn)展。
從交互方式上來看,不依賴手柄或遙控器,只用眼睛、手勢和聲音,就能實(shí)現(xiàn)實(shí)時(shí)操控。其中,手勢將成為最常用的交互方式:手指一捏,即可進(jìn)行點(diǎn)擊和選中;左右撥動(dòng),可對正在瀏覽的界面或內(nèi)容進(jìn)行切換??臻g世界,一“觸”即發(fā)。在特定使用場景下,還能通過抬腕、捏拳、拖拽等進(jìn)行操控。
從信息呈現(xiàn)來看,展現(xiàn)方式、邏輯和過去大不相同。信息流實(shí)現(xiàn)從網(wǎng)頁平鋪、手機(jī)信息流到空間展示的革命:信息顯示的物理局限被打破,無論在哪里,每一寸空間都可以成為你的屏幕,并且同時(shí)具有空間多屏與空間巨幕兩種展現(xiàn)方式,讓信息展現(xiàn)的界面有了無限的伸縮彈性??臻g多屏可以同時(shí)開啟多個(gè)窗口,并列排布;顯示界面均帶有空間定位功能,輕微轉(zhuǎn)頭,信息一覽無余;行業(yè)首創(chuàng)超大巨幕,比例可達(dá)32:9,信息呈現(xiàn)不在受限于屏幕尺寸。此外,不同使用場景下空間交互的體驗(yàn)也會(huì)有所不同。
YodaOS-Master操作系統(tǒng)發(fā)布
引領(lǐng)行業(yè)進(jìn)入軟件和生態(tài)建設(shè)2.0時(shí)代
據(jù)了解,Rokid Station Pro搭載的全空間化AR操作系統(tǒng)YodaOS-Master,是物理世界和數(shù)字世界的連接者:通過攝像頭捕捉和基于分區(qū)的ATW/PTW 低延遲渲染,單目SLAM可實(shí)現(xiàn)厘米級精度,精準(zhǔn)感知物理空間;依靠優(yōu)化算法和XR2+的硬件加速,利用高精度的實(shí)時(shí)圖像傳感器對3D手勢進(jìn)行高精準(zhǔn)的位置捕捉,同時(shí)通過低算法延遲滿足手勢追蹤的實(shí)時(shí)性要求,完成3D手勢交互。
為了實(shí)現(xiàn)最好的XR體驗(yàn),YodaOS-Master從芯片優(yōu)化、硬件設(shè)計(jì)、軟件架構(gòu)、AR算法還有創(chuàng)作工具等諸多方面都做了巨大升級,基于單目攝像頭的空間算法能力達(dá)到了業(yè)界領(lǐng)先水平,或是目前最為完整的一套面向空間計(jì)算時(shí)代的AR空間操作系統(tǒng)。
圍繞空間感知、空間理解、空間渲染和空間交互展開設(shè)計(jì),YodaOS-Master通過從底層到頂層的系統(tǒng)設(shè)計(jì)優(yōu)化,為用戶帶來前所未有空間體驗(yàn)的同時(shí),也為開發(fā)者提供了從硬件、基礎(chǔ)層、平臺層直至應(yīng)用層的全鏈路服務(wù)。
Rokid AR開放平臺(ar.rokid.com)全新升級為UXR SDK 2.0。
Rokid UXR 2.0 開放SDK,支持0/3/6 DoF空間模式的選擇,以及手勢、射線、鍵鼠、語音等多模態(tài)交互方式,滿足多樣化的應(yīng)用開發(fā)需求;算法原子化,讓App可以在系統(tǒng)升級中自然獲得性能的提升,減少開發(fā)者負(fù)擔(dān);具備系統(tǒng)性能監(jiān)測工具和調(diào)試模式,便于開發(fā)者隨時(shí)了解運(yùn)行狀態(tài);對Rokid跨代設(shè)備實(shí)現(xiàn)兼容。
UXR SDK 2.0支持Unity等OpenXR標(biāo)準(zhǔn)的主流引擎,以及MRTK接口,開發(fā)者可以輕松開發(fā)移植。目前,Rokid Station Pro里搭載的AR實(shí)驗(yàn)室,大部分作品都是開發(fā)者在基于Unity引擎進(jìn)行創(chuàng)作的。
在Master系統(tǒng)里,Rokid還內(nèi)置了自研JSAR引擎和小組件容器,JS開發(fā)者可以輕松上傳自己的組件。JSAR支持多平臺,讓開發(fā)更簡單、運(yùn)行更安全;新增快應(yīng)用生態(tài)類型,不需下載安裝,點(diǎn)擊即可快速產(chǎn)出很多短小有趣的快應(yīng)用。
此外,Rokid還設(shè)立了AR專項(xiàng)開發(fā)者基金、發(fā)現(xiàn)、扶持優(yōu)秀的AR開發(fā)團(tuán)隊(duì),邀請開發(fā)者加入,打造豐富的AR應(yīng)用生態(tài)。
由龐大生態(tài)共同構(gòu)建的平臺才能催生應(yīng)用的繁榮。依賴Rokid AR Studio,Rokid與開發(fā)者將共同參與、共同推動(dòng)AR行業(yè)的創(chuàng)新與發(fā)展,讓AR改造現(xiàn)實(shí)世界,讓AR成為人們?nèi)粘I畹囊徊糠帧?/p>
“3+3+N”
空間交互下的生產(chǎn)力變革
人類從器械時(shí)代到工業(yè)時(shí)代再到計(jì)算機(jī)時(shí)代,生產(chǎn)工具的進(jìn)化讓生產(chǎn)力實(shí)現(xiàn)了飛躍。作為繼個(gè)人計(jì)算時(shí)代與移動(dòng)計(jì)算時(shí)代后的下一個(gè)發(fā)展方向,空間計(jì)算打破空間物理限制,帶來新的交互方式,必將引起生產(chǎn)工具與生產(chǎn)力的新變革。
目前,杭州靈伴科技(Rokid)空間計(jì)算已經(jīng)應(yīng)用于智慧點(diǎn)巡檢、應(yīng)急演練、企業(yè)展廳、AR培訓(xùn)等多個(gè)應(yīng)用場景。
杭州靈伴科技(Rokid)企業(yè)事業(yè)群產(chǎn)品線負(fù)責(zé)人江偉健介紹:“就像手機(jī)支付替代現(xiàn)金、銀行卡,智能門鎖替代鑰匙一樣,工業(yè)因?yàn)榭萍歼M(jìn)步同樣在‘減負(fù)’,空間計(jì)算讓每個(gè)工人都能根據(jù)實(shí)時(shí)且可視化的引導(dǎo)來進(jìn)行精準(zhǔn)的作業(yè)。”
據(jù)介紹,AR技術(shù)讓工廠作業(yè)拋開傳統(tǒng)掃碼、NFC、PDA的識別方式,低成本高自由的作業(yè)動(dòng)線配置,讓每個(gè)人員能夠按流程規(guī)范操作,走到相關(guān)設(shè)備面前即可自動(dòng)觸發(fā),快速生成設(shè)備動(dòng)態(tài)數(shù)據(jù),讓作業(yè)人員快速知曉。并且在作業(yè)過程中可通過語音、手勢等多種交互方式快速查看圖紙、3D模型等,了解設(shè)備詳情甚至內(nèi)部精細(xì)結(jié)構(gòu)。
通過空間計(jì)算的加持,企業(yè)在信息獲取、危險(xiǎn)預(yù)警、仿真制造等各個(gè)方面都能夠獲得極大的效率提升,從而進(jìn)一步解放生產(chǎn)力。
不僅如此,空間計(jì)算技術(shù)的加入,也讓企業(yè)實(shí)訓(xùn)擺脫空間桎梏,區(qū)別于VR培訓(xùn)完全虛擬的體驗(yàn),AR可視化培訓(xùn)可以將培訓(xùn)內(nèi)容通過虛擬方式疊加在真實(shí)設(shè)備場景中,可以讓受訓(xùn)者邊培訓(xùn)邊操作,實(shí)現(xiàn)培訓(xùn)場景和培訓(xùn)模式的創(chuàng)新。
會(huì)上,杭州靈伴科技還發(fā)布了“3+3+N”的工業(yè)端產(chǎn)品架構(gòu),即三大硬件+xPert遠(yuǎn)程指導(dǎo)、xHands智慧運(yùn)檢、xWorks工廠漫游三大標(biāo)品+智慧巡檢、專家指導(dǎo)、遠(yuǎn)程售后、應(yīng)急指揮等N個(gè)應(yīng)用場景。
未來,杭州靈伴科技將繼續(xù)鉆研科技創(chuàng)新,堅(jiān)持讓協(xié)同更高效,讓工作更簡單的愿景,用科技引領(lǐng)行業(yè)發(fā)展,推動(dòng)數(shù)字化時(shí)代下的工業(yè)變革。