本申請涉及云計算，具體涉及工業(yè)質(zhì)檢邊緣算力調(diào)度方法、裝置、電子設(shè)備及存儲介質(zhì)。

背景技術(shù)：

1、隨著工業(yè)互聯(lián)網(wǎng)新業(yè)務(wù)的不斷涌現(xiàn)，出現(xiàn)了大量通過機(jī)器視覺進(jìn)行工業(yè)場景的質(zhì)檢場景，這些直接影響到生產(chǎn)線產(chǎn)品的生產(chǎn)質(zhì)量可靠性及安全性。

2、工業(yè)質(zhì)檢所需的推理和訓(xùn)練算力主要是預(yù)先部署的，工業(yè)質(zhì)檢的推理和訓(xùn)練算力主要是算力本地部署，或者算力部署云上，只能通過手工調(diào)整對接其他位置的算力資源。

3、對于工業(yè)質(zhì)檢場景下的客戶如果全部采用本地部署推理和訓(xùn)練算力，則需要預(yù)先采購部署較大金額的算力資源，在休班期間也會造成資源的空置，且本地算力無法快速擴(kuò)容。

4、如果將推理和訓(xùn)練算力全部部署在云上，云上包含邊緣算力節(jié)點(diǎn)位置較多，不恰當(dāng)?shù)乃懔?jié)點(diǎn)位置選擇，可能會因?yàn)榫W(wǎng)絡(luò)時延而影響生產(chǎn)流水線工作節(jié)拍，并且工業(yè)質(zhì)檢圖像較大，易因傳輸而產(chǎn)生較大的帶寬壓力。

5、因此亟需一種可以自感知、自適應(yīng)、自調(diào)度的工業(yè)質(zhì)檢邊緣算力調(diào)度方案。

技術(shù)實(shí)現(xiàn)思路

1、本申請實(shí)施例提供工業(yè)質(zhì)檢邊緣算力調(diào)度方法、裝置、電子設(shè)備及存儲介質(zhì)，用以解決現(xiàn)有技術(shù)中工業(yè)質(zhì)檢邊緣算力缺乏自感知、自適應(yīng)、自調(diào)度等能力的技術(shù)問題。

2、第一方面，本申請實(shí)施例提供一種工業(yè)質(zhì)檢邊緣算力調(diào)度方法，包括：獲取最近t時間段內(nèi)各個邊緣算力節(jié)點(diǎn)的狀態(tài)數(shù)據(jù)；其中狀態(tài)數(shù)據(jù)包括gpu顯存使用率、可提供的最大總并發(fā)帶寬和平均網(wǎng)絡(luò)時延；將狀態(tài)數(shù)據(jù)輸入至多條件ddpg模型，得到多條件ddpg模型輸出的目標(biāo)節(jié)點(diǎn)調(diào)度位置；其中多條件ddpg模型包括執(zhí)行器和評判器；執(zhí)行器根據(jù)狀態(tài)數(shù)據(jù)輸出多個初步節(jié)點(diǎn)調(diào)度位置；評判器確定每一初步節(jié)點(diǎn)調(diào)度位置的q值并將q值反饋至執(zhí)行器，執(zhí)行器根據(jù)q值從多個初步節(jié)點(diǎn)調(diào)度位置中確定目標(biāo)節(jié)點(diǎn)調(diào)度位置。

3、在一個實(shí)施例中，將狀態(tài)數(shù)據(jù)輸入至多條件ddpg模型，包括：將gpu顯存使用率作為狀態(tài)，可提供的最大總并發(fā)帶寬作為第一條件，平均網(wǎng)絡(luò)時延作為第二條件輸入至多條件ddpg模型的執(zhí)行器。

4、在一個實(shí)施例中，獲取最近t時間段內(nèi)各個邊緣算力節(jié)點(diǎn)的狀態(tài)數(shù)據(jù)，包括：從分布式容器云管理平臺中獲取最近t時間段內(nèi)各個邊緣算力節(jié)點(diǎn)的狀態(tài)數(shù)據(jù)；其中t為時間顆粒度。

5、在一個實(shí)施例中，得到多條件ddpg模型輸出的目標(biāo)節(jié)點(diǎn)調(diào)度位置之后，包括：將目標(biāo)節(jié)點(diǎn)調(diào)度位置反饋至分布式容器云管理平臺，以使分布式容器云管理平臺執(zhí)行對應(yīng)目標(biāo)節(jié)點(diǎn)調(diào)度位置的動作。

6、在一個實(shí)施例中，將狀態(tài)數(shù)據(jù)輸入至多條件ddpg模型之前，包括：獲取初始化多條件ddpg模型；根據(jù)訓(xùn)練數(shù)據(jù)對初始化多條件ddpg模型進(jìn)行訓(xùn)練，得到多條件ddpg模型；其中訓(xùn)練數(shù)據(jù)包括各個邊緣算力節(jié)點(diǎn)的每一個狀態(tài)下的行動、獎勵和下一個狀態(tài)的結(jié)果；訓(xùn)練內(nèi)容包括更新評判器網(wǎng)絡(luò)、更新執(zhí)行器網(wǎng)絡(luò)和更新目標(biāo)網(wǎng)絡(luò)。

7、在一個實(shí)施例中，將狀態(tài)數(shù)據(jù)輸入至多條件ddpg模型之前，包括：將gpu顯存使用率、可提供的最大總并發(fā)帶寬和平均網(wǎng)絡(luò)時延輸入至預(yù)處理模塊，得到預(yù)處理模塊輸出的進(jìn)行數(shù)據(jù)標(biāo)準(zhǔn)化處理后的狀態(tài)數(shù)據(jù)。

8、在一個實(shí)施例中，執(zhí)行器包括第一動作目標(biāo)網(wǎng)絡(luò)和第一動作估計網(wǎng)絡(luò)，第一動作目標(biāo)網(wǎng)絡(luò)和第一動作估計網(wǎng)絡(luò)是結(jié)構(gòu)相同的兩個神經(jīng)網(wǎng)絡(luò)，第一動作目標(biāo)網(wǎng)絡(luò)和第一動作估計網(wǎng)絡(luò)的參數(shù)更新頻率不同；評判器包括第二動作目標(biāo)網(wǎng)絡(luò)和第二動作估計網(wǎng)絡(luò)，第二動作目標(biāo)網(wǎng)絡(luò)和第二動作估計網(wǎng)絡(luò)是結(jié)構(gòu)相同的兩個神經(jīng)網(wǎng)絡(luò)，第二動作目標(biāo)網(wǎng)絡(luò)和第二動作估計網(wǎng)絡(luò)的參數(shù)更新頻率不同。

9、第二方面，本申請實(shí)施例提供一種工業(yè)質(zhì)檢邊緣算力調(diào)度裝置，包括：狀態(tài)數(shù)據(jù)模塊，用于獲取最近t時間段內(nèi)各個邊緣算力節(jié)點(diǎn)的狀態(tài)數(shù)據(jù)；其中狀態(tài)數(shù)據(jù)包括gpu顯存使用率、可提供的最大總并發(fā)帶寬和平均網(wǎng)絡(luò)時延；目標(biāo)節(jié)點(diǎn)調(diào)度位置模塊，用于將狀態(tài)數(shù)據(jù)輸入至多條件ddpg模型，得到多條件ddpg模型輸出的目標(biāo)節(jié)點(diǎn)調(diào)度位置；其中多條件ddpg模型包括執(zhí)行器和評判器；執(zhí)行器根據(jù)狀態(tài)數(shù)據(jù)輸出多個初步節(jié)點(diǎn)調(diào)度位置；評判器確定每一初步節(jié)點(diǎn)調(diào)度位置的q值并將q值反饋至執(zhí)行器，執(zhí)行器根據(jù)q值從多個初步節(jié)點(diǎn)調(diào)度位置中確定目標(biāo)節(jié)點(diǎn)調(diào)度位置。

10、第三方面，本申請實(shí)施例提供一種電子設(shè)備，包括處理器和存儲有計算機(jī)程序的存儲器，所述處理器執(zhí)行所述程序時實(shí)現(xiàn)第一方面所述的工業(yè)質(zhì)檢邊緣算力調(diào)度方法。

11、第四方面，本申請實(shí)施例一種非暫態(tài)計算機(jī)可讀存儲介質(zhì)，其上存儲有計算機(jī)程序，該計算機(jī)程序被處理器執(zhí)行時實(shí)現(xiàn)第一方面所述的工業(yè)質(zhì)檢邊緣算力調(diào)度方法。

12、本申請實(shí)施例提供的工業(yè)質(zhì)檢邊緣算力調(diào)度方法、裝置、電子設(shè)備及存儲介質(zhì)，該方法包括：獲取最近t時間段內(nèi)各個邊緣算力節(jié)點(diǎn)的狀態(tài)數(shù)據(jù)；其中狀態(tài)數(shù)據(jù)包括gpu顯存使用率、可提供的最大總并發(fā)帶寬和平均網(wǎng)絡(luò)時延；將狀態(tài)數(shù)據(jù)輸入至多條件ddpg模型，得到多條件ddpg模型輸出的目標(biāo)節(jié)點(diǎn)調(diào)度位置；其中多條件ddpg模型包括執(zhí)行器和評判器；執(zhí)行器根據(jù)狀態(tài)數(shù)據(jù)輸出多個初步節(jié)點(diǎn)調(diào)度位置；評判器確定每一初步節(jié)點(diǎn)調(diào)度位置的q值并將q值反饋至執(zhí)行器，執(zhí)行器根據(jù)q值從多個初步節(jié)點(diǎn)調(diào)度位置中確定目標(biāo)節(jié)點(diǎn)調(diào)度位置。本申請能夠感知各個邊緣算力節(jié)點(diǎn)的狀態(tài)，并確定最大程度降低到算力節(jié)點(diǎn)平均響應(yīng)時延、同時提升總并發(fā)帶寬利用率的目標(biāo)節(jié)點(diǎn)調(diào)度位置，從而充分提升運(yùn)營商的帶寬利用率，和客戶對于工業(yè)質(zhì)檢業(yè)務(wù)處理的使用體驗(yàn)。

技術(shù)特征：

1.一種工業(yè)質(zhì)檢邊緣算力調(diào)度方法，其特征在于，包括：

2.根據(jù)權(quán)利要求1所述的工業(yè)質(zhì)檢邊緣算力調(diào)度方法，其特征在于，所述將所述狀態(tài)數(shù)據(jù)輸入至多條件ddpg模型，包括：

3.根據(jù)權(quán)利要求1所述的工業(yè)質(zhì)檢邊緣算力調(diào)度方法，其特征在于，所述獲取最近t時間段內(nèi)各個邊緣算力節(jié)點(diǎn)的狀態(tài)數(shù)據(jù)，包括：

4.根據(jù)權(quán)利要求1所述的工業(yè)質(zhì)檢邊緣算力調(diào)度方法，其特征在于，所述得到所述多條件ddpg模型輸出的目標(biāo)節(jié)點(diǎn)調(diào)度位置之后，包括：

5.根據(jù)權(quán)利要求1所述的工業(yè)質(zhì)檢邊緣算力調(diào)度方法，其特征在于，所述將所述狀態(tài)數(shù)據(jù)輸入至多條件ddpg模型之前，包括：

6.根據(jù)權(quán)利要求1所述的工業(yè)質(zhì)檢邊緣算力調(diào)度方法，其特征在于，所述將所述狀態(tài)數(shù)據(jù)輸入至多條件ddpg模型之前，包括：

7.根據(jù)權(quán)利要求1所述的工業(yè)質(zhì)檢邊緣算力調(diào)度方法，其特征在于，所述執(zhí)行器包括第一動作目標(biāo)網(wǎng)絡(luò)和第一動作估計網(wǎng)絡(luò)，所述第一動作目標(biāo)網(wǎng)絡(luò)和所述第一動作估計網(wǎng)絡(luò)是結(jié)構(gòu)相同的兩個神經(jīng)網(wǎng)絡(luò)，所述第一動作目標(biāo)網(wǎng)絡(luò)和所述第一動作估計網(wǎng)絡(luò)的參數(shù)更新頻率不同；

8.一種工業(yè)質(zhì)檢邊緣算力調(diào)度裝置，其特征在于，包括：

9.一種電子設(shè)備，包括處理器和存儲有計算機(jī)程序的存儲器，其特征在于，所述處理器執(zhí)行所述計算機(jī)程序時實(shí)現(xiàn)權(quán)利要求1至7任一項(xiàng)所述的工業(yè)質(zhì)檢邊緣算力調(diào)度方法。

10.一種非暫態(tài)計算機(jī)可讀存儲介質(zhì)，其上存儲有計算機(jī)程序，其特征在于，所述計算機(jī)程序被處理器執(zhí)行時實(shí)現(xiàn)如權(quán)利要求1至7任一項(xiàng)所述的工業(yè)質(zhì)檢邊緣算力調(diào)度方法。

技術(shù)總結(jié)
本申請涉及云計算技術(shù)領(lǐng)域，提供工業(yè)質(zhì)檢邊緣算力調(diào)度方法、裝置、電子設(shè)備及存儲介質(zhì)，該方法包括：獲取最近T時間段內(nèi)各個邊緣算力節(jié)點(diǎn)的狀態(tài)數(shù)據(jù)；狀態(tài)數(shù)據(jù)包括GPU顯存使用率、可提供的最大總并發(fā)帶寬和平均網(wǎng)絡(luò)時延；將狀態(tài)數(shù)據(jù)輸入至多條件DDPG模型得到目標(biāo)節(jié)點(diǎn)調(diào)度位置；多條件DDPG模型包括執(zhí)行器和評判器；執(zhí)行器根據(jù)狀態(tài)數(shù)據(jù)輸出多個初步節(jié)點(diǎn)調(diào)度位置；評判器確定每一初步節(jié)點(diǎn)調(diào)度位置的Q值并反饋至執(zhí)行器，執(zhí)行器根據(jù)Q值從多個初步節(jié)點(diǎn)調(diào)度位置中確定目標(biāo)節(jié)點(diǎn)調(diào)度位置。本申請能夠感知各個邊緣算力節(jié)點(diǎn)的狀態(tài)并確定合適的目標(biāo)節(jié)點(diǎn)調(diào)度位置，從而充分提升運(yùn)營商的帶寬利用率，和客戶對于工業(yè)質(zhì)檢業(yè)務(wù)處理的使用體驗(yàn)。

技術(shù)研發(fā)人員：牛坡,丁東,趙煒,徐昊帆,陳豪,方強(qiáng),王越,李志勇,俞淑妍,范冰沁
受保護(hù)的技術(shù)使用者：中國移動通信集團(tuán)浙江有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2024/10/21