基于跨模態(tài)聯(lián)合編碼的多模態(tài)情感分析

摘要： 如何提高多模態(tài)融合特征的有效性是多模態(tài)情感分析領(lǐng)域的熱點(diǎn)問(wèn)題之一。以往的研究大多通過(guò)設(shè)計(jì)復(fù)雜的融合策略獲取融合特征表示，這些方法往往忽略了模態(tài)間復(fù)雜的關(guān)聯(lián)關(guān)系，同時(shí)存在著由于模態(tài)信息不一致所導(dǎo)致的融合特征有效性降低問(wèn)題，進(jìn)而影響模型的性能。針對(duì)上述問(wèn)題，提出一種基于跨模態(tài)聯(lián)合編碼的多模態(tài)情感分析模型。在特征提取方面，利用預(yù)訓(xùn)練模型BERT和Facet模型分別提取文本和視覺(jué)特征，...