全國中小學科展

依全國中小學科展屆次查詢

依相關評語查詢

全「面」分析 : 基於面部表情的情緒模型

科展類別

全國中小學科展作品

屆次

第65屆--民國114年

科別

電腦與資訊學科

學校名稱

國立彰化高級中學

指導老師

邱科文

作者

周宥勝;黃振哲

關鍵字

深度學習、臉部表情、情緒狀態

摘要或動機

  本研究著重於透過面部表情的判斷進而推斷情緒狀態的深度學習神經網路模型。首先,將人類的情緒狀態分為七個類別,並透過MediaPipe框架取得影像中的臉部特徵位置,利用其座標框定臉部範圍並作為深度學習模型的輸入。第二,透過部不同特徵訓練模型,進一步優化模型識別情緒的準確度,並嘗試不同的特徵,例如:趨勢曲線函數的係數或是各種向量。最後我們設計了一個插件,利用此模型在Google Meet中進行即時的影像辨識並分析,作為線上課程的授課成效評估。   目前本模型在透過五層卷積層配合池化層及全連階層,並提取瞳孔眉毛向量、瞳孔鼻尖向量以及口部中心為基準點的向量作為特徵,能夠有84%的準確度,F1值落在約85,其中快樂情緒的辨識精準度高達98%。

052510.pdf

Adobe Reader(Pdf)檔案