動(dòng)態(tài)時(shí)間序列建模的多模態(tài)情感識(shí)別方法

摘要： 現(xiàn)有的情感識(shí)別研究未充分考慮語(yǔ)音信號(hào)中的局部-全局信息和長(zhǎng)期時(shí)間依賴關(guān)系，文本特征提取也存在特征稀疏和信息丟失的問(wèn)題。為解決上述問(wèn)題，提出動(dòng)態(tài)時(shí)間序列建模的多模態(tài)情感識(shí)別方法。設(shè)計(jì)動(dòng)態(tài)時(shí)間窗口模塊分割語(yǔ)音信號(hào)從而捕捉局部-全局信息，并通過(guò)雙向序列建模捕獲信號(hào)中的空間信息?？紤]到文本信息對(duì)情感分析的重要性，采用基于Transformer模型的卷積神經(jīng)網(wǎng)絡(luò)捕捉文本中不同位置間的依賴... （共10頁(yè)）