近日,《黑神話:悟空》火爆全網(wǎng),國內(nèi)首個高品質(zhì)3A游戲大作在全球市場中掀起熱潮。作為《黑神話:悟空》背后的黑科技——“空間計算”瞬間火爆出圈。
虛擬動點(diǎn)作為AI與空間計算領(lǐng)軍企業(yè),以AI賦能,經(jīng)過多年深耕,構(gòu)建了以空間計算為戰(zhàn)略方向,以AI大模型、硬件設(shè)備、空間數(shù)據(jù)為三大核心能力的“一體三核”發(fā)展戰(zhàn)略。除本次賦能《黑神話:悟空》的OptiTrack光學(xué)動作捕捉算法外,在空間計算領(lǐng)域,公司還擁有Lydcap無標(biāo)記點(diǎn)識別計算、LYDIA動作大模型等核心算法技術(shù)。
8月28日,虛擬動點(diǎn)攜手華為亮相全球首個以大數(shù)據(jù)為主題的博覽會——中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會,隆重展示“Lydcap無標(biāo)記點(diǎn)識別計算”。
1 無標(biāo)記點(diǎn)動捕
相較精度更注重效率
無標(biāo)記點(diǎn)動作捕捉是一種利用計算機(jī)視覺,從圖像或視頻中捕捉人體運(yùn)動信息的技術(shù)。該系統(tǒng)基于深度學(xué)習(xí)原理,建立一個模擬手工解析動作技術(shù)視頻過程的神經(jīng)網(wǎng)絡(luò)計算機(jī)模型,從而實(shí)現(xiàn)計算機(jī)系統(tǒng)對動作技術(shù)視頻中人體關(guān)節(jié)點(diǎn)的自動識別。無標(biāo)記動作捕捉的實(shí)現(xiàn)方式可以基于單目或多目攝像頭,其中多目攝像頭可以獲取更多的視角信息,提高運(yùn)動捕捉的精度和魯棒性。
相對于光學(xué)識別算法系統(tǒng),Lydcap成本更低,部署調(diào)試極為便捷,F(xiàn)場無需佩戴任何設(shè)備,可同時實(shí)現(xiàn)對空間內(nèi)多人進(jìn)行空間識別與分析。目前Lydcap支持USB接口和網(wǎng)口攝像機(jī)、可完成視頻錄制和預(yù)覽、可導(dǎo)出FBX通用格式文件,且直接適配第三方軟件,如Maya、3dsmax、Blender等,已經(jīng)構(gòu)建了完整的技術(shù)生態(tài)閉環(huán)。
在商業(yè)模式上,Lydcap分為Windows本地部署專業(yè)版,以及SaaS化普通版兩個版本。專業(yè)版針對企業(yè)級用戶,為其在影視、動畫、游戲制作、大屏交互、文旅、虛擬主播等領(lǐng)域提供完整軟件技術(shù)服務(wù)。目前已成功助力哈爾濱工程大學(xué)相關(guān)研究及教學(xué);普通版可為小型工作室與個人用戶提供基礎(chǔ)空間計算數(shù)據(jù)服務(wù)。
消費(fèi)級產(chǎn)品:配合USB接口攝像機(jī)使用,只需幾分鐘,操作簡單,即可將辦公室/客廳等任意場地迅速變成動捕空間,完成畫面的采集和錄制,快速上傳至云端計算,并輸出骨骼數(shù)據(jù)。適用于景區(qū)互動體驗(yàn)、虛擬坐席等場景。
專業(yè)級產(chǎn)品:配合網(wǎng)口攝像機(jī)使用,可高速捕捉每一個細(xì)微動作,使得動作捕捉的數(shù)據(jù)結(jié)果更加平滑、穩(wěn)定,支持實(shí)時捕捉,可與引擎結(jié)合完成多場景應(yīng)用,如動畫制作、展覽展陳等。
2 更易穿戴 更多場景,更廣應(yīng)用
方案特點(diǎn):
1、無需穿戴標(biāo)記物:無需受試者粘貼標(biāo)記物,避免體驗(yàn)者因穿著負(fù)擔(dān)造成動作限制。
2、適應(yīng)性強(qiáng):可適應(yīng)不同場景,為客戶提供更多復(fù)雜環(huán)境下使用的可能性。
3、實(shí)時性能:通過硬件加速可實(shí)現(xiàn)低延遲實(shí)時三維人體重建。
4、云端部署:支持云端部署,完成動作數(shù)據(jù)提取的功能。
5、多目標(biāo)分析:可同時對空間內(nèi)多人進(jìn)行識別與分析。
6、實(shí)時記錄分析系統(tǒng):可對人體的關(guān)節(jié)基礎(chǔ)角度等數(shù)據(jù)進(jìn)行實(shí)時記錄和分析。
應(yīng)用場景:
可廣泛應(yīng)用于定位精度需求不高,現(xiàn)場要求便捷,預(yù)算有限的場景,如小成本動畫制作、在線虛擬坐席、安全監(jiān)控以及文化旅游場景中的時空互動、人景互動等場景,幫助客戶用較低的成本,呈現(xiàn)更多樣的互動效果,如:
1、體育健身:無標(biāo)記運(yùn)動捕捉可用于運(yùn)動員姿態(tài)分析及技術(shù)改進(jìn),也可用于普通人健身和運(yùn)動監(jiān)控。比如,分析籃球運(yùn)動員的投籃姿勢,評估姿勢的優(yōu)劣,并進(jìn)行調(diào)整和優(yōu)化等。
2、文旅交互:與傳統(tǒng)旅游方式相比,無標(biāo)記點(diǎn)動捕可應(yīng)用于景區(qū)數(shù)字講解、光影互動體驗(yàn)等,降低景區(qū)人力成本的同時,賦予景區(qū)新消費(fèi)模式,為游客帶來更豐富多樣、更沉浸的體驗(yàn)。
3、動畫制作:在動畫制作領(lǐng)域,無標(biāo)記運(yùn)動捕捉技術(shù)可以更自然的捕捉演員動作,幫助動畫中的虛擬形象更加生動自然展現(xiàn),助力提升游戲角色的動作質(zhì)量和表現(xiàn)力,提升用戶沉浸體驗(yàn)感。
4、教育培訓(xùn):無標(biāo)記運(yùn)動捕捉可以用于教育和培訓(xùn)領(lǐng)域,幫助學(xué)生更好地理解和學(xué)習(xí)人體運(yùn)動的原理和技巧。比如對于舞者來說,無束縛、輕松的環(huán)境更有利于表達(dá)和進(jìn)行創(chuàng)作,無標(biāo)記動捕技術(shù)擺脫了動捕設(shè)備的穿戴問題,更有利于釋放舞者的表演天賦,激發(fā)創(chuàng)造靈感。
5、醫(yī)療康復(fù):無標(biāo)記運(yùn)動捕捉無需患者穿戴,對于行動不便的患者,可用于評估康復(fù)患者的運(yùn)動能力和治療效果,為康復(fù)治療提供科學(xué)依據(jù)和精準(zhǔn)指導(dǎo)。
Lydcap無標(biāo)記點(diǎn)算法與Optitrack光學(xué)算法相互補(bǔ)充,客戶群體覆蓋各有側(cè)重。Lydcap針對的客戶群體相對于空間數(shù)據(jù)精度,更聚焦效率優(yōu)先;而Optitrack的客戶則如《黑神話:悟空》更需要精度的保障。未來,利亞德·虛擬動點(diǎn)將繼續(xù)立足研發(fā),不斷優(yōu)化算法,助力更多場景落地