西安電子科技大學(xué)任鵬獲國家專利權(quán)
買專利賣專利找龍圖騰,真高效! 查專利查商標(biāo)用IPTOP,全免費!專利年費監(jiān)控用IP管家,真方便!
龍圖騰網(wǎng)獲悉西安電子科技大學(xué)申請的專利一種基于深度強化學(xué)習(xí)算法的服務(wù)功能鏈部署方法及系統(tǒng)獲國家發(fā)明授權(quán)專利權(quán),本發(fā)明授權(quán)專利權(quán)由國家知識產(chǎn)權(quán)局授予,授權(quán)公告號為:CN116418694B 。
龍圖騰網(wǎng)通過國家知識產(chǎn)權(quán)局官網(wǎng)在2025-08-12發(fā)布的發(fā)明授權(quán)授權(quán)公告中獲悉:該發(fā)明授權(quán)的專利申請?zhí)?專利號為:202310218839.1,技術(shù)領(lǐng)域涉及:H04L41/16;該發(fā)明授權(quán)一種基于深度強化學(xué)習(xí)算法的服務(wù)功能鏈部署方法及系統(tǒng)是由任鵬;劉飛達;李毅;許寶毅;相征設(shè)計研發(fā)完成,并于2023-03-07向國家知識產(chǎn)權(quán)局提交的專利申請。
本一種基于深度強化學(xué)習(xí)算法的服務(wù)功能鏈部署方法及系統(tǒng)在說明書摘要公布了:本發(fā)明提供了一種基于深度強化學(xué)習(xí)算法的服務(wù)功能鏈部署方法,包括以下步驟:S1:將實際網(wǎng)絡(luò)抽象成數(shù)學(xué)無向有環(huán)圖,將服務(wù)功能鏈部署請求表示為無環(huán)有向圖;S2:根據(jù)無向有環(huán)圖和無環(huán)有向圖將網(wǎng)絡(luò)性能數(shù)據(jù)數(shù)學(xué)化;S3:基于數(shù)學(xué)化后的網(wǎng)絡(luò)性能數(shù)據(jù)構(gòu)建馬爾可夫決策過程模型,包含獎勵集,動作集,狀態(tài)集;S4:使用Actor?Critic算法搭建Actor網(wǎng)絡(luò)和Critic網(wǎng)絡(luò),并基于BILSTM神經(jīng)網(wǎng)絡(luò)提取隱藏狀態(tài)向量特征,將其作為深度神經(jīng)網(wǎng)絡(luò)的輸入進行特征學(xué)習(xí),深度神經(jīng)網(wǎng)絡(luò)輸出策略動作集合;S5:從策略動作集合中選取發(fā)生概率最大的策略動作作用于網(wǎng)絡(luò)環(huán)境。本發(fā)明的自適應(yīng)方法部署服務(wù)功能鏈,能夠有效的適應(yīng)用戶的需求,顯著提高服務(wù)功能鏈在時變網(wǎng)絡(luò)環(huán)境下的部署成功率。
本發(fā)明授權(quán)一種基于深度強化學(xué)習(xí)算法的服務(wù)功能鏈部署方法及系統(tǒng)在權(quán)利要求書中公布了:1.一種基于深度強化學(xué)習(xí)算法的服務(wù)功能鏈部署方法,其特征在于,包括以下步驟: 步驟S110、將實際網(wǎng)絡(luò)抽象成數(shù)學(xué)無向有環(huán)圖,將服務(wù)功能鏈部署請求表示為無環(huán)有向圖; 步驟S120、根據(jù)所述無向有環(huán)圖和所述無環(huán)有向圖將網(wǎng)絡(luò)性能數(shù)據(jù)數(shù)學(xué)化,其中,所述網(wǎng)絡(luò)性能數(shù)據(jù)包括時延數(shù)據(jù)、帶寬數(shù)據(jù)和網(wǎng)絡(luò)資源數(shù)據(jù); 步驟S130、基于數(shù)學(xué)化后的網(wǎng)絡(luò)性能數(shù)據(jù)構(gòu)建馬爾可夫決策過程模型,馬爾可夫決策過程模型是在環(huán)境中模擬智能體的隨機性策略與回報的數(shù)學(xué)模型,該數(shù)學(xué)模型包含獎勵集,動作集,狀態(tài)集; 步驟S140、所述狀態(tài)集、所述動作集和所述獎勵集使用Actor-Critic算法搭建Actor網(wǎng)絡(luò)和Critic網(wǎng)絡(luò),并基于BILSTM神經(jīng)網(wǎng)絡(luò)提取網(wǎng)絡(luò)環(huán)境狀態(tài)空間狀態(tài)的隱藏狀態(tài)向量特征,將隱藏狀態(tài)向量特征作為深度神經(jīng)網(wǎng)絡(luò)的輸入進行特征學(xué)習(xí),深度神經(jīng)網(wǎng)絡(luò)輸出策略動作集合; 步驟S150、從策略動作集合中選取發(fā)生概率最大的策略動作作用于網(wǎng)絡(luò)環(huán)境。
如需購買、轉(zhuǎn)讓、實施、許可或投資類似專利技術(shù),可聯(lián)系本專利的申請人或?qū)@麢?quán)人西安電子科技大學(xué),其通訊地址為:710071 陜西省西安市太白南路2號;或者聯(lián)系龍圖騰網(wǎng)官方客服,聯(lián)系龍圖騰網(wǎng)可撥打電話0551-65771310或微信搜索“龍圖騰網(wǎng)”。
1、本報告根據(jù)公開、合法渠道獲得相關(guān)數(shù)據(jù)和信息,力求客觀、公正,但并不保證數(shù)據(jù)的最終完整性和準(zhǔn)確性。
2、報告中的分析和結(jié)論僅反映本公司于發(fā)布本報告當(dāng)日的職業(yè)理解,僅供參考使用,不能作為本公司承擔(dān)任何法律責(zé)任的依據(jù)或者憑證。
- 萬喻獲國家專利權(quán)
- 杭州諾茂醫(yī)療科技有限公司王永勝獲國家專利權(quán)
- 華為技術(shù)有限公司諸華林獲國家專利權(quán)
- 領(lǐng)星生物科技(上海)有限公司許強獲國家專利權(quán)
- 威斯康星州醫(yī)藥大學(xué)股份有限公司X·A·李獲國家專利權(quán)
- 谷歌有限責(zé)任公司大衛(wèi)·林德獲國家專利權(quán)
- 北京奇藝世紀(jì)科技有限公司章敏杰獲國家專利權(quán)
- 賽銳貝尓股份有限公司約瑟夫·帕維茲獲國家專利權(quán)
- 深圳麥格米特電氣股份有限公司周滿枝獲國家專利權(quán)
- 佛山市順德區(qū)美的電熱電器制造有限公司馬志海獲國家專利權(quán)