多模态情感分析 | ViLab https://vilab.team/tag/%E5%A4%9A%E6%A8%A1%E6%80%81%E6%83%85%E6%84%9F%E5%88%86%E6%9E%90/ 多模态情感分析 Hugo Blox Builder (https://hugoblox.com)en-usMon, 10 Jul 2023 00:00:00 +0000 https://vilab.team/media/icon_hu2896232876136423579.png 多模态情感分析 https://vilab.team/tag/%E5%A4%9A%E6%A8%A1%E6%80%81%E6%83%85%E6%84%9F%E5%88%86%E6%9E%90/ Multimodal sentiment analysis with preferential fusion and distance-aware contrastive learning https://vilab.team/publication/multimodal-sentiment-analysis-with-preferential-fusion-and-d/ Mon, 10 Jul 2023 00:00:00 +0000 https://vilab.team/publication/multimodal-sentiment-analysis-with-preferential-fusion-and-d/ <p>本文针对多模态情感分析中文本模态与情感标签之间存在的虚假关联问题，提出了一种名为PriSA的新框架。该框架首先通过优先跨模态融合方法，利用文本模态引导计算跨模态相关性；随后引入距离感知对比学习，利用情感标签之间的距离信息进一步计算混合模态相关性；最终基于混合模态相关性和判别性类内特征识别情感信息。实验表明该方法能有效缓解文本虚假关联带来的影响，提升多模态情感分析性能。</p>