（1）ErgoLAB表情識別分析模塊

產品概述：

Emotion表情測量與分析模塊，結合機器學習算法與圖像識別技術，利用面部肌肉特征點計算和分類表情狀態(tài)，自動編碼多種基本表情、精確計算情感效價，系統(tǒng)可實時檢測被試的頭部位置、面部特征點、視線朝向、基本生物信息等，結合AI狀態(tài)識別進一步實現(xiàn)對操作人員的分心、疲勞、應激等狀態(tài)的自動識別以及特定環(huán)境條件下的預警反饋。

產品特點：

l 自動識別7種面部表情狀態(tài)以及21種微表情數據

l 自動監(jiān)測操作人員的頭部位置坐標

l 自動檢測操作人員的整個面部特征點

l 支持導入外部視頻，作為表情數據源，進行離線的表情識別、編碼與統(tǒng)計

l 表情統(tǒng)計算法支持基礎表情數據統(tǒng)計分析、實時表情編碼可視化分析、事后表情編碼可視化分析、多維度表情數據交互分析

l 結合人工智能與機器學習算法，進一步實現(xiàn)對操作人員的分心、疲勞、應激等狀態(tài)的自動識別以及特定環(huán)境條件下的預警反饋

產品參數：

l 采集并編碼七種面部表情數據以及21種微表情數據。基本表情數據包括高興、悲傷、厭惡、恐懼、驚訝、生氣、蔑視；微表情數據包括抬起眉毛內角、抬起眉毛外角、皺眉（降低眉毛）、上眼瞼上升、臉頰提升、眼輪匝肌外圈收緊、眼輪匝肌內圈收緊、皺鼻、拉動上嘴唇向上運動、拉動人中部位的皮膚向上、拉動嘴角傾斜向上、急劇的嘴唇拉動、收緊嘴角、拉動嘴角向下傾斜、拉動下唇向下、推動下唇向上、撅嘴、嘴角拉伸、收緊雙唇向外翻、眼睛擴大、張嘴。

l 采集操作人員的整個面部特征點，以0至區(qū)間計算表情程度值，通過系統(tǒng)內嵌的情感效價計算模型，精確識別積極、中性、消極情感，客觀評價個體情緒狀態(tài)，與多模態(tài)數據形成客觀有效的印證關系。

l 實時跟蹤操作人員的頭部朝向，采集頭部位置三軸數據，包括翻滾角(Roll)、偏航角(Yaw)、俯仰角(Pitch)。采集個體的瞳孔距離，測定注視方向，進行注意狀態(tài)監(jiān)測。

應用方向：

l 

ErgoLAB多模態(tài)同步方案：

整體概述

ErgoLAB人機環(huán)境同步平臺采用多模態(tài)數據時鐘同步技術，平臺可完成完整的實驗和測評流程，包括項目管理-試驗設計-同步采集-信號處理-數據分析-人因智能評估-可視化報告，支持基于云架構技術的團體測試和大數據管理。

ErgoLAB人機環(huán)境同步平臺采用主客觀結合多模態(tài)數據同步采集與多維度驗證的方法，數據實時同步種類包含大腦認知數據（EEG/BCI腦電儀與腦機接口邊緣計算設備、fNIRS/BCI近紅外腦成像儀），視覺數據（Eyetracker眼動儀與視線交互系統(tǒng)），生理數據（生理儀含：GSR/EDA、EMG、ECG、EOG、HRV、RESP、TEMP/SKT、PPG、SpO2），行為觀察、肢體動作與面部表情（基本情緒、情緒效價、微表情等）數據、生物力學數據（拉力、握力、捏力、壓力…），人機交互數據（包含人機界面交互行為數據以及對應的鍵盤操作，鼠標點擊、懸浮、劃入劃出等；移動終端人機交互行為數據以及對應的手指軌跡操作行為如點擊、縮放、滑動等；VR終端界面人機交互行為數據及對應的雙手操作拾取、丟棄、控制，VR空間行走軌跡）、以及多類型時空行為軌跡數據采集(包括室內、戶外、以及VR環(huán)境不同時空的行走軌跡、行車軌跡、訪問狀態(tài)以及視線交互、情感反應、交互操作行為等數據實時同步采集)、以及作業(yè)空間及作業(yè)環(huán)境數據（溫度、濕度、噪音、光照、大氣壓、濕度、粉塵等）等客觀量化數據；為科學研究及應用提供完整的數據指標。

ErgoAI人因智能：

將人工智能技術引入人因工程研究工具，人因工程行業(yè)更加深度，使得實驗環(huán)境不會受限于某一種設備或數據指標，采集分析不同典型行業(yè)或學科專業(yè)的人-機-環(huán)境系統(tǒng)交互過程中自然狀態(tài)下的人類行為數據，獲取更接近真實人員狀態(tài)的數據。平臺還提供覆蓋科研實驗全流程的功能模塊，包括項目管理、實驗設計、同步采集、數據分析、綜合統(tǒng)計和可視化報告，結合ErgoAI人因智能邊緣計算平臺為多模態(tài)人機環(huán)境研究提供一站式人因工程+人工智能解決方案。以ErgoLAB人機環(huán)境同步平臺和ErgoAI人因智能邊緣計算平臺為核心的多模態(tài)同步人因智能解決方案大大提高了實驗結果的信效度，同時節(jié)省了研究的人力、物力、時間，提高了研究與測評的整體效率。