微軟技術許可有限責任公司M·杜迪克獲國家專利權
買專利賣專利找龍圖騰,真高效! 查專利查商標用IPTOP,全免費!專利年費監控用IP管家,真方便!
龍圖騰網獲悉微軟技術許可有限責任公司申請的專利用于數據的有效使用以用于個性化的系統獲國家發明授權專利權,本發明授權專利權由國家知識產權局授予,授權公告號為:CN113994359B 。
龍圖騰網通過國家知識產權局官網在2025-08-22發布的發明授權授權公告中獲悉:該發明授權的專利申請號/專利號為:202080043510.0,技術領域涉及:G06Q30/02;該發明授權用于數據的有效使用以用于個性化的系統是由M·杜迪克;A·克里希納穆爾蒂;M·迪馬科波洛;蘇怡設計研發完成,并于2020-04-26向國家知識產權局提交的專利申請。
本用于數據的有效使用以用于個性化的系統在說明書摘要公布了:使用基于先前“日志記錄”策略而收集的歷史數據來執行新“目標”策略的離策略評估,以估計該目標策略的性能。可以使用估計器,其中基于質量的估計器或質量不可知估計器被用于對歷史數據中的觀察到的獎勵與由目標策略生成的估計出的獎勵之間的差異進行加權。質量不可知估計器可以用于根據閾值來評估重要性權重。在這樣的示例中,當重要性權重超過閾值時,質量不可知估計器在閾值處剪裁重要性權重,從而提供與獎勵預測器的質量無關的固定上限。在其他示例中,使用了基于質量的估計器,其中上限結合了獎勵預測器的質量,以便修改由估計器使用的重要性權重。
本發明授權用于數據的有效使用以用于個性化的系統在權利要求書中公布了:1.一種系統,包括: 至少一個處理器;以及 存儲指令的存儲器,所述指令在由所述至少一個處理器執行時,使所述系統執行一組操作,所述一組操作包括: 針對與日志記錄策略相關聯的歷史數據生成獎勵預測器,其中所述獎勵預測器能夠用于基于所述歷史數據來生成預期獎勵; 確定離策略評估模型,其中所述離策略評估模型包括從由質量不可知估計器和基于質量的估計器組成的估計器組中選擇的估計器,其中所述質量不可知估計器包括閾值,并且所述質量不可知估計器使用所述閾值來評估重要性權重; 使用所述離策略評估模型并且基于與所述日志記錄策略相關聯的所述歷史數據來評估目標策略,以確定所述目標策略的預期獎勵度量是否高于所述日志記錄策略的獎勵度量;以及 當確定所述預期獎勵度量高于所述日志記錄策略的所述獎勵度量時,生成使用所述目標策略而不是所述日志記錄策略的指示,其中: 第一獎勵基于用戶完成第一動作被生成,并且第二獎勵基于用戶完成第二動作被生成;并且 所述獎勵預測器被訓練以針對給定的上下文生成所述預期獎勵。
如需購買、轉讓、實施、許可或投資類似專利技術,可聯系本專利的申請人或專利權人微軟技術許可有限責任公司,其通訊地址為:美國華盛頓州;或者聯系龍圖騰網官方客服,聯系龍圖騰網可撥打電話0551-65771310或微信搜索“龍圖騰網”。
1、本報告根據公開、合法渠道獲得相關數據和信息,力求客觀、公正,但并不保證數據的最終完整性和準確性。
2、報告中的分析和結論僅反映本公司于發布本報告當日的職業理解,僅供參考使用,不能作為本公司承擔任何法律責任的依據或者憑證。