基于多模态数据的时空解耦情感分析方法及系统

本发明公开基于多模态数据的时空解耦情感分析方法及系统，涉及多模态情感分析技术领域，将文本、音频和视频初始特征输入时空解耦与语言聚焦融合模型进行处理，将增强后的文本、音频和视频特征进行相应特征提取，得到特定文本、音频和视频特征；对增强后的文本、音频和视频特征进行共享特征提取，得到共享文本、音频和视频特征；将特定文本、音频和视频特征以及共享文本、音频和视频特征输入至语言聚焦吸引子模块进行多层次特征提取，分别得到低层次特征、中层次特征和高层次特征；分别基于低层次特征、中层次特征和高层次特征进行情感预测，并融合各层次特征情感预测结果，得到最终情感预测结果，实现了多模态情感分析中的解耦与融合。