動態(tài)時間序列建模的多模態(tài)情感識別方法
摘要: 現(xiàn)有的情感識別研究未充分考慮語音信號中的局部-全局信息和長期時間依賴關系,文本特征提取也存在特征稀疏和信息丟失的問題。為解決上述問題,提出動態(tài)時間序列建模的多模態(tài)情感識別方法。設計動態(tài)時間窗口模塊分割語音信號從而捕捉局部-全局信息,并通過雙向序列建模捕獲信號中的空間信息??紤]到文本信息對情感分析的重要性,采用基于Transformer模型的卷積神經(jīng)網(wǎng)絡捕捉文本中不同位置間的依賴... (共10頁)
多模態(tài)情感分析 動態(tài)時間窗口 雙向時間序列建模 卷積神經(jīng)網(wǎng)絡 多模態(tài)融合
開通會員,享受整站包年服務