動態(tài)時間序列建模的多模態(tài)情感識別方法
摘要: 現(xiàn)有的情感識別研究未充分考慮語音信號中的局部-全局信息和長期時間依賴關(guān)系,文本特征提取也存在特征稀疏和信息丟失的問題。為解決上述問題,提出動態(tài)時間序列建模的多模態(tài)情感識別方法。設(shè)計動態(tài)時間窗口模塊分割語音信號從而捕捉局部-全局信息,并通過雙向序列建模捕獲信號中的空間信息。考慮到文本信息對情感分析的重要性,采用基于Transformer模型的卷積神經(jīng)網(wǎng)絡(luò)捕捉文本中不同位置間的依賴... (共10頁)
開通會員,享受整站包年服務(wù)