基于視覺(jué)語(yǔ)義與提示學(xué)習(xí)的多模態(tài)情感分析模型

摘要： 隨著深度學(xué)習(xí)技術(shù)的發(fā)展，多模態(tài)情感分析已成為研究熱點(diǎn)之一。然而，大多數(shù)多模態(tài)情感分析模型或從不同模態(tài)中提取特征向量并簡(jiǎn)單地進(jìn)行加權(quán)求和，導(dǎo)致數(shù)據(jù)無(wú)法準(zhǔn)確地映射到統(tǒng)一的多模態(tài)向量空間中，或依賴圖像描述模型將圖像轉(zhuǎn)化為文本，導(dǎo)致提取到過(guò)多不包含情感信息的視覺(jué)語(yǔ)義，造成信息冗余，最終影響模型的性能。為了解決這些問(wèn)題，提出了一種基于視覺(jué)語(yǔ)義與提示學(xué)習(xí)的多模態(tài)情感分析模型VSPL。該模型...