基于多模態(tài)情感分析的個性化英語教育系統(tǒng)及方法
本申請?zhí)峁┮环N基于多模態(tài)情感分析的個性化英語教育系統(tǒng)及方法,其系統(tǒng)包括:用于接收并處理學(xué)生的多模態(tài)數(shù)據(jù)的多模態(tài)交互模塊、用于對輸入的多模態(tài)數(shù)據(jù)進(jìn)行情感分析的情感識別模塊、基于學(xué)生的歷史學(xué)習(xí)數(shù)據(jù)評估該學(xué)生的實(shí)時學(xué)習(xí)狀態(tài)的個性化模塊、根據(jù)情感狀態(tài)與實(shí)時學(xué)習(xí)狀態(tài)動態(tài)調(diào)整互動反饋的核心大腦模塊。情感識別模塊包括情感信息融合,情感信息融合采用加權(quán)策略,并通過情感一致性約束和沖突修正機(jī)制來調(diào)整最終輸出的情感狀態(tài)。本申請通過情感一致性損失函數(shù)、沖突修正機(jī)制和基于知識圖譜的超綱控制機(jī)制,精準(zhǔn)識別學(xué)生情感和認(rèn)知狀態(tài)。
廈門大學(xué)
2021-01-12