江西師范大學(xué)黃欣獲國家專利權(quán)
買專利賣專利找龍圖騰,真高效! 查專利查商標(biāo)用IPTOP,全免費!專利年費監(jiān)控用IP管家,真方便!
龍圖騰網(wǎng)獲悉江西師范大學(xué)申請的專利基于時空協(xié)同的音樂表演姿態(tài)實時驅(qū)動方法及其系統(tǒng)獲國家發(fā)明授權(quán)專利權(quán),本發(fā)明授權(quán)專利權(quán)由國家知識產(chǎn)權(quán)局授予,授權(quán)公告號為:CN120411317B 。
龍圖騰網(wǎng)通過國家知識產(chǎn)權(quán)局官網(wǎng)在2025-09-02發(fā)布的發(fā)明授權(quán)授權(quán)公告中獲悉:該發(fā)明授權(quán)的專利申請?zhí)?專利號為:202510917152.6,技術(shù)領(lǐng)域涉及:G06T13/40;該發(fā)明授權(quán)基于時空協(xié)同的音樂表演姿態(tài)實時驅(qū)動方法及其系統(tǒng)是由黃欣;陳奕涵;汪媛;曾潔婷;王翔泰;鄔宇娟設(shè)計研發(fā)完成,并于2025-07-03向國家知識產(chǎn)權(quán)局提交的專利申請。
本基于時空協(xié)同的音樂表演姿態(tài)實時驅(qū)動方法及其系統(tǒng)在說明書摘要公布了:本發(fā)明涉及虛擬現(xiàn)實技術(shù)領(lǐng)域,具體涉及基于時空協(xié)同的音樂表演姿態(tài)實時驅(qū)動方法及其系統(tǒng),通過多角度視頻流采集表演者動作,并結(jié)合音頻信號,利用輕量化卷積神經(jīng)網(wǎng)絡(luò)提取關(guān)鍵關(guān)節(jié)坐標(biāo);創(chuàng)新性地采用多尺度時間窗口分析歷史幀數(shù)據(jù),提取短程、中程和長程時序特征;引入關(guān)鍵關(guān)節(jié)重要性計算機制,對演奏相關(guān)關(guān)鍵關(guān)節(jié)賦予更高權(quán)重;通過時空深度協(xié)同交互機制實現(xiàn)時空信息的雙向增強;基于系統(tǒng)實時延遲信息動態(tài)調(diào)整預(yù)測參數(shù),主動預(yù)測未來姿態(tài)以補償系統(tǒng)延遲;結(jié)合音樂節(jié)奏信息對預(yù)測姿態(tài)進行表現(xiàn)力增強;通過物理約束和逆運動學(xué)處理生成自然、逼真的虛擬角色驅(qū)動數(shù)據(jù),本發(fā)明顯著降低了系統(tǒng)延遲感知,提升了音畫同步性和表演表現(xiàn)力。
本發(fā)明授權(quán)基于時空協(xié)同的音樂表演姿態(tài)實時驅(qū)動方法及其系統(tǒng)在權(quán)利要求書中公布了:1.基于時空協(xié)同的音樂表演姿態(tài)實時驅(qū)動方法,其特征在于,包括:獲取多角度視頻流和音頻信號;基于所述多角度視頻流,通過輕量化卷積神經(jīng)網(wǎng)絡(luò)提取表演者關(guān)鍵關(guān)節(jié)的坐標(biāo)數(shù)據(jù);對歷史幀中的所述關(guān)鍵關(guān)節(jié)的坐標(biāo)數(shù)據(jù)進行分析,包括:基于不同長度的時間窗口,提取多尺度時序特征;計算所述關(guān)鍵關(guān)節(jié)的重要性權(quán)重;通過時空深度協(xié)同交互機制,融合所述多尺度時序特征和當(dāng)前幀空間特征,并將所述關(guān)鍵關(guān)節(jié)的重要性權(quán)重應(yīng)用于融合過程中,對演奏相關(guān)的關(guān)鍵關(guān)節(jié)特征進行加權(quán)增強;獲取音樂表演姿態(tài)實時驅(qū)動處理流程中的采集延遲信息、處理延遲信息和傳輸延遲信息,并基于延遲信息調(diào)整預(yù)測參數(shù);基于融合的特征和調(diào)整后的預(yù)測參數(shù),預(yù)測未來時刻的關(guān)鍵關(guān)節(jié)坐標(biāo)數(shù)據(jù);結(jié)合所述音頻信號中的音樂節(jié)奏信息,對預(yù)測的關(guān)鍵關(guān)節(jié)坐標(biāo)數(shù)據(jù)進行表現(xiàn)力增強;將增強后的關(guān)鍵關(guān)節(jié)坐標(biāo)數(shù)據(jù)傳輸至渲染端;以及在所述渲染端,基于物理約束和逆運動學(xué)模型,將所述增強后的關(guān)鍵關(guān)節(jié)坐標(biāo)數(shù)據(jù)轉(zhuǎn)換為虛擬角色驅(qū)動數(shù)據(jù); 所述基于不同長度的時間窗口,提取多尺度時序特征具體包括:設(shè)置短程時間窗口、中程時間窗口和長程時間窗口,分別用于捕獲不同時間尺度的動作特性;對所述短程時間窗口內(nèi)的關(guān)鍵關(guān)節(jié)坐標(biāo)序列,提取瞬時變化特征;對所述中程時間窗口內(nèi)的關(guān)鍵關(guān)節(jié)坐標(biāo)序列,提取完整動作單元特征;對所述長程時間窗口內(nèi)的關(guān)鍵關(guān)節(jié)坐標(biāo)序列,提取節(jié)奏模式特征;以及融合所述瞬時變化特征、所述完整動作單元特征和所述節(jié)奏模式特征,生成綜合的多尺度時序特征; 計算所述關(guān)鍵關(guān)節(jié)的重要性權(quán)重具體包括:基于人體骨骼結(jié)構(gòu)建立關(guān)鍵關(guān)節(jié)連接拓?fù)鋱D;計算當(dāng)前幀中各關(guān)鍵關(guān)節(jié)間的相對位置關(guān)系;基于所述相對位置關(guān)系,生成關(guān)鍵關(guān)節(jié)間的注意力分?jǐn)?shù);識別當(dāng)前樂器類型和演奏狀態(tài);以及根據(jù)所述樂器類型和所述演奏狀態(tài),對與演奏相關(guān)的關(guān)鍵關(guān)節(jié)的注意力分?jǐn)?shù)進行增強,生成最終的關(guān)鍵關(guān)節(jié)重要性權(quán)重; 所述獲取音樂表演姿態(tài)實時驅(qū)動處理流程中的采集延遲信息、處理延遲信息和傳輸延遲信息,并基于延遲信息調(diào)整預(yù)測參數(shù)具體包括:實時監(jiān)測視頻采集延遲信息、處理延遲信息和網(wǎng)絡(luò)傳輸延遲信息;將所述延遲信息編碼為條件向量;基于不同的延遲量級,設(shè)置多個預(yù)測分支;以及根據(jù)當(dāng)前實際延遲情況,動態(tài)調(diào)整各預(yù)測分支的權(quán)重,生成適應(yīng)當(dāng)前系統(tǒng)狀態(tài)的預(yù)測參數(shù)。
如需購買、轉(zhuǎn)讓、實施、許可或投資類似專利技術(shù),可聯(lián)系本專利的申請人或?qū)@麢?quán)人江西師范大學(xué),其通訊地址為:330200 江西省南昌市南昌縣紫陽大道99號;或者聯(lián)系龍圖騰網(wǎng)官方客服,聯(lián)系龍圖騰網(wǎng)可撥打電話0551-65771310或微信搜索“龍圖騰網(wǎng)”。
1、本報告根據(jù)公開、合法渠道獲得相關(guān)數(shù)據(jù)和信息,力求客觀、公正,但并不保證數(shù)據(jù)的最終完整性和準(zhǔn)確性。
2、報告中的分析和結(jié)論僅反映本公司于發(fā)布本報告當(dāng)日的職業(yè)理解,僅供參考使用,不能作為本公司承擔(dān)任何法律責(zé)任的依據(jù)或者憑證。


熱門推薦
- 蘇州度亙光電器件有限公司雷謝福獲國家專利權(quán)
- OPPO廣東移動通信有限公司劉佳獲國家專利權(quán)
- 深圳市中科藍訊科技股份有限公司陳文韜獲國家專利權(quán)
- 株式會社麥迪帕克特金圣鎮(zhèn)獲國家專利權(quán)
- 阿里巴巴集團控股有限公司鄭衛(wèi)東獲國家專利權(quán)
- 頂級公司戴維·漢韋爾獲國家專利權(quán)
- 三星顯示有限公司金正起獲國家專利權(quán)
- 西安艾潤物聯(lián)網(wǎng)技術(shù)服務(wù)有限責(zé)任公司王林祥獲國家專利權(quán)
- 沈陽匯博熱能設(shè)備有限公司王玉獲國家專利權(quán)
- 上海新微技術(shù)研發(fā)中心有限公司吳炫燁獲國家專利權(quán)