1.一種高效協(xié)作學(xué)習(xí)的訓(xùn)練方法,所述協(xié)作學(xué)習(xí)的參與方包括聚合節(jié)點(diǎn)和多個(gè)本地節(jié)點(diǎn),其特征在于,所述方法包括以下步驟:
2.根據(jù)權(quán)利要求1所述的方法,其特征在于,根據(jù)所述全局梯度均值向量、所述全局協(xié)方差矩陣以及各個(gè)所述本地模型的梯度均值向量和梯度向量的協(xié)方差矩陣,通過(guò)以下公式確定各個(gè)所述本地節(jié)點(diǎn)的最優(yōu)本地更新次數(shù):
3.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述聚合節(jié)點(diǎn)根據(jù)所述多個(gè)本地節(jié)點(diǎn)更新后的模型參數(shù)確定所述全局模型的模型參數(shù),包括:
4.根據(jù)權(quán)利要求1所述的方法,其特征在于,還包括:
5.一種高效協(xié)作學(xué)習(xí)的訓(xùn)練裝置,所述協(xié)作學(xué)習(xí)的參與方包括聚合節(jié)點(diǎn)和多個(gè)本地節(jié)點(diǎn),其特征在于,包括:
6.根據(jù)權(quán)利要求5所述的裝置,其特征在于,所述第四確定模塊具體用于:根據(jù)所述全局梯度均值向量、所述全局協(xié)方差矩陣以及各個(gè)所述本地模型的梯度均值向量和梯度向量的協(xié)方差矩陣,通過(guò)以下公式確定各個(gè)所述本地節(jié)點(diǎn)的最優(yōu)本地更新次數(shù):
7.根據(jù)權(quán)利要求5所述的裝置,其特征在于,所述第五確定模塊包括:
8.根據(jù)權(quán)利要求5所述的裝置,其特征在于,還包括質(zhì)量評(píng)估模塊;所述質(zhì)量評(píng)估模塊用于:
9.一種電子設(shè)備,其特征在于,包括:處理器,以及與所述處理器通信連接的存儲(chǔ)器;
10.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),其特征在于,所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)中存儲(chǔ)有計(jì)算機(jī)執(zhí)行指令,所述計(jì)算機(jī)執(zhí)行指令被處理器執(zhí)行時(shí)用于實(shí)現(xiàn)如權(quán)利要求1-4中任一項(xiàng)所述的方法。