联合方面注意力交互的图文方面类情感识别

随着多媒体的快速发展，单纯采用文本的方面类情感分析，不能准确识别用户所表达的情感。而现有图文数据的方面类情感分析方法仅考虑图文模态间的交互，忽略图文数据的不一致性和相关性。因此，提出联合方面注意力交互网络(JAAIN)模型的图文方面类情感识别方法。所提方法针对图文数据的不一致性与相关性，通过多层次融合方面信息和图文信息，去除与给定方面无关的文本和图像，增强给定方面的图文模态数据的情感表示，将文本数据情感表示、图像数据情感表示及方面类情感表示进行拼接融合与全连接，实现图文方面类情感判别。在数据集MultiZOL上进行实验，实验结果表明：所提模型能够提升图文方面类情感判别的性能。