基于掩模重構(gòu)與動態(tài)注意力的跨模態(tài)行人重識別

摘要： 跨模態(tài)行人重識別是一項具有挑戰(zhàn)性的行人檢索任務(wù)。現(xiàn)有研究側(cè)重于通過提取模態(tài)共享特征來減小模態(tài)間差異，忽視了對模態(tài)內(nèi)差異和背景干擾的處理。為此，提出了一種掩模重構(gòu)與動態(tài)注意力（MRDA）網(wǎng)絡(luò)，該網(wǎng)絡(luò)通過重構(gòu)人體區(qū)域特征來消除背景雜波的影響，從而增強網(wǎng)絡(luò)對背景變化的魯棒性。此外，該網(wǎng)絡(luò)結(jié)合了動態(tài)注意力機制，以過濾無關(guān)信息，動態(tài)挖掘并增強具有辨別力的特征表示，消除模態(tài)內(nèi)差異的影響。實...