ErgoLAB面部表情分析系統
二、系統特點(diǎn)
l 實(shí)時(shí)自動(dòng)編碼7種面部表情狀態(tài),包括高興、悲傷、厭惡、恐懼、驚訝、生氣、參與度。
l 實(shí)時(shí)監測頭部位置坐標Head Position,包括翻滾角Roll、偏航角Yaw、俯仰角Pitch。
l 實(shí)時(shí)計算面部表情程度值,每種以0至100%區間計算,以及整體面部肌肉的參與度狀態(tài)。
l 精確識別個(gè)體情感效價(jià),包括正性、中性、負性3種情感狀態(tài)及21種微表情數據。
l 自動(dòng)計算個(gè)體的瞳孔距離,識別眼睛注視方向,監測注意狀態(tài)。
l 實(shí)時(shí)計算并識別多個(gè)年齡段狀態(tài),以及個(gè)體屬性信息,如性別、是否佩戴眼鏡。
三、系統功能
1. 面部表情自動(dòng)編碼
l 面部表情自定義處理參數模塊,包括實(shí)時(shí)處理及離線(xiàn)處理,如數據插值、中值濾波、均值濾波等,支持自定義程度閾值、合并閾值、以及大腦加工時(shí)間。
l 自動(dòng)識別并編碼七種基本表情,包括高興、悲傷、厭惡、恐懼、驚訝、生氣、參與度,以0至100%區間計算表情程度值;
l 計算多種微表情數據,如抬起眉毛內角、抬起眉毛外角、皺眉(降低眉毛)、上眼瞼上升、臉頰提升、眼輪匝肌外圈收緊/內圈收緊、皺鼻、拉動(dòng)上嘴唇向上運動(dòng)、拉動(dòng)人中部位的皮膚向上、拉動(dòng)嘴角傾斜向上、急劇的嘴唇拉動(dòng)、收緊嘴角、拉動(dòng)嘴角向下傾斜、拉動(dòng)下唇向下、推動(dòng)下唇向上、撅嘴、嘴角拉伸、收緊雙唇向外翻、眼睛擴大、張嘴等。
2. 狀態(tài)識別與預警反饋
l 系統內嵌情感效價(jià)計算模型,精確識別積極、中性、消極情感,客觀(guān)評價(jià)個(gè)體情緒狀態(tài),與多模態(tài)數據形成客觀(guān)有效的印證關(guān)系;
l 系統能夠自動(dòng)檢測實(shí)時(shí)跟蹤操作人員頭部朝向,包括俯仰角、偏航角、翻滾角,并測定注視方向,計算瞳孔間距以及注意狀態(tài)檢測;
l 結合人工智能與機器學(xué)習算法,進(jìn)一步實(shí)現對操作人員的分心、疲勞、應激等狀態(tài)的自動(dòng)識別以及特定環(huán)境條件下的預警反饋。
3. 面部表情分析與統計
l 實(shí)時(shí)可視化的表情編碼:系統實(shí)時(shí)計算操作人員的表情狀態(tài)與情緒效價(jià),在實(shí)驗過(guò)程中,主試可實(shí)時(shí)查看與監測操作人員的表情程度與情緒變化,并做出相應的任務(wù)調整與行為預警。
l 自動(dòng)統計面部表情數據:包括每種面部表情的開(kāi)始時(shí)間、結束時(shí)間、第一次發(fā)生的時(shí)間、總發(fā)生次數、頻率、每次發(fā)生的時(shí)間、總的持續時(shí)間、總的持續時(shí)間在全部觀(guān)察時(shí)間中所占的百分比、最短的持續時(shí)間、最長(cháng)的持續時(shí)間、平均持續時(shí)間、持續時(shí)間的標準差、持續時(shí)間間隔置信區間等數據。
4. 多維度數據統計與二次開(kāi)發(fā)
l 多維度數據交叉統計:系統支持面部表情數據與其他多模態(tài)數據(眼動(dòng)、腦電、生理、動(dòng)補、行為等)的同步交叉分析,多個(gè)數據源在同一平臺界面呈現,在采集的同時(shí)間軸數據里選擇相應的時(shí)間片段,可同步觀(guān)察和統計分析所有數據流之間的相關(guān)關(guān)系;
l 具有API開(kāi)發(fā)接口:面部表情原始數據與狀態(tài)分析結果可以被其他程序實(shí)時(shí)訪(fǎng)問(wèn),可使其它程序對被試者的情緒進(jìn)行反饋。