合作伙伴：英偉達(dá)
時(shí)間：2024
應(yīng)用技術(shù)/產(chǎn)品：PN Studio 慣性動(dòng)作捕捉套裝, HybridTrack 運(yùn)動(dòng)測(cè)量系統(tǒng)
應(yīng)用類型：具身智能人形機(jī)器人

項(xiàng)目概述：借助 NVIDIA Isaac Sim & Isaac Lab 平臺(tái)開放度極高的系統(tǒng)架構(gòu)以及提供的豐富資產(chǎn)與數(shù)據(jù)生態(tài)，諾亦騰與機(jī)器人領(lǐng)域的多家企業(yè)/研究機(jī)構(gòu)一起，以極高的開發(fā)效率，打通動(dòng)作捕捉/運(yùn)動(dòng)測(cè)量系統(tǒng)與機(jī)器人虛擬本體/真實(shí)本體之間的工作回路，打造出一個(gè)真正意義上的 HITL 解決方案。該方案可以讓包括科研工作者、企業(yè)級(jí)用戶在內(nèi)的各個(gè)級(jí)別開發(fā)者，高效、便捷地將實(shí)時(shí)動(dòng)作捕捉和高精度實(shí)時(shí)追蹤能力引入既有工作流。 基于自定義的 MocapApi 接口，諾亦騰實(shí)現(xiàn)了動(dòng)作捕捉系統(tǒng)與 NVIDIA Isaac Sim 的數(shù)據(jù)聯(lián)通，從而基于現(xiàn)有算法，快速接入動(dòng)作捕捉和高精度追蹤數(shù)據(jù)流，實(shí)時(shí)驅(qū)動(dòng)仿真環(huán)境下的虛擬機(jī)器人本體或者真實(shí)的機(jī)器人本體，用遙操作的模式完成任務(wù)，采集數(shù)據(jù)。除此之外，還可以在機(jī)器人自主任務(wù)完成的過程中實(shí)現(xiàn)快速人工干預(yù)覆蓋失敗場(chǎng)景。同時(shí)，高精度的人體動(dòng)作數(shù)據(jù)采集和大空間的高精度追蹤記錄了整個(gè)實(shí)驗(yàn)環(huán)境的過程，為后期的算法調(diào)優(yōu)、復(fù)盤、量化評(píng)估等環(huán)節(jié)帶來了更多可能性。