隨著醫療保健中情緒監測的重要性提升,基於腦電圖(EEG)的多模態情緒識別系統逐漸受到重視。然而,日常醫療環境中獲取EEG信號的困難,常導致數據不完整。為了解決這個問題,研究人員提出了一個多教師知識蒸餾框架,結合大型語言模型(LLM)來增強特徵學習。透過LLM提取時間特徵,圖卷積神經網絡則負責空間特徵,並引入因果遮罩和信心指標以提升特徵轉移的相關性。實驗結果顯示,該模型在不完整模態下表現優於現有方法,顯示大型模型在醫療情緒識別中的潛力。相關代碼已公開,網址為 https://github.com/yuzhezhangEEG/LM-KD。
PubMed
DOI