課堂環境雙模態情感評價系統設計與效果分析

摘要：學生的面部表情和姿態反映學生的學習狀態,是課堂教學評價的重要觀察指標。然而,由于表情和姿態的即時性以及觀察時間和精力的限制,影響了傳統課堂觀察的持續性和有效性。針對傳統課堂情感觀察和識別的局限性,設計開發了基于課堂視頻監控數據的雙模態情感評價系統。首先對視頻數據提取SLTOP特征得到復合時空特征集,然后依據最近鄰方法對其進行分類,由于表情和姿態在識別上具有互補性,進一步將分類結果在每個情感狀態類別上進行交叉驗證,得到各自權值和后驗概率,導入云滴融合模型得到最終的情感狀態分類結果,最后計算輸出課堂雙模態情感評價結果。測試結果表明評價效果比較理想,并與人工統計結果作比較,整體準確率不低于80%,證明本系統對于傳統課堂的評價具有有效性。