一、系統(tǒng)介紹
1.1 對(duì)表達(dá)的情緒反應(yīng)進(jìn)行分類和記錄
情緒的指標(biāo)之一是我們的臉。當(dāng)我們大笑或哭泣時(shí),我們正在展示我們的情緒,讓其他人瞥見我們的思想,因?yàn)樗麄兏鶕?jù)關(guān)鍵面部特征的變化"閱讀"我們的臉?;谟?jì)算機(jī)的面部表情分析非常令人印象深刻地模仿了我們的人類編碼技能,因?yàn)樗东@了對(duì)任何類型的情感參與內(nèi)容的原始,未經(jīng)過(guò)濾的情感反應(yīng)。這些表達(dá)的情緒狀態(tài)是使用全自動(dòng)計(jì)算機(jī)算法實(shí)時(shí)檢測(cè)的,這些算法通過(guò)網(wǎng)絡(luò)攝像頭記錄面部表情。
Affectiva模塊能夠利用Affectiva的面部表情分析實(shí)時(shí)網(wǎng)絡(luò)攝像頭饋送或視頻記錄??梢詫?shí)時(shí)查看數(shù)據(jù),然后進(jìn)行分析和導(dǎo)出,幫助理解面部表情反應(yīng)。
iMotions面部表情分析模塊無(wú)縫集成了自動(dòng)化面部編碼引擎:Affectiva的AFFDEX和Realeyes。使用網(wǎng)絡(luò)攝像頭,您可以直接在iMotions軟件中實(shí)時(shí)同步表達(dá)的面部情緒與刺激。如果您錄制了面部視頻,則只需將視頻導(dǎo)入iMotions軟件即可進(jìn)行面部表情分析后期處理。通過(guò)內(nèi)置的分析和可視化工具獲得見解,或?qū)С鰯?shù)據(jù)以進(jìn)行其他分析。
1.2 面部情緒分類
該模塊提供20種面部表情測(cè)量(動(dòng)作單位),7種核心情緒(快樂(lè)/幸福,困惑/憤怒,恐懼,厭惡,蔑視,悲傷和驚訝),面部特征和行為指標(biāo),如頭部方向和注意力。這些輸出度量值提供概率值來(lái)表示表達(dá)預(yù)期情緒的可能性。還提供了參與度和效價(jià)的匯總分?jǐn)?shù),讓您大致了解總體表達(dá)的響應(yīng)。
時(shí)間軸注釋和LiveMarkers還可以在iMotions中執(zhí)行行為編碼。結(jié)合生物傳感器數(shù)據(jù)和自我報(bào)告,面部表情分析和行為編碼提供了比其他方式更深刻的見解。
二、模塊主要特點(diǎn)
2.1 理解情緒
通過(guò)分析面部表情,可以快速、量化地洞察所表達(dá)的面部情緒。幾十年來(lái),面部表情分析一直是人工進(jìn)行的——現(xiàn)在可以立即進(jìn)行,幫助你理解刺激引發(fā)的面部情緒,就像它們產(chǎn)生的速度一樣快。
2.2 導(dǎo)入后分析
視頻記錄可以在后期導(dǎo)入到iMotions中,用于分析面部表情,而無(wú)需進(jìn)行實(shí)時(shí)分析。以你喜歡的方式記錄,或者使用先前的記錄,來(lái)理解所表達(dá)的情感。
2.3 無(wú)縫集成
集成和同步來(lái)自20多家獨(dú)立供應(yīng)商的50多種不同傳感器,涵蓋10多種模態(tài)。通過(guò)實(shí)驗(yàn)室流層添加更多傳感器。實(shí)時(shí)轉(zhuǎn)發(fā)數(shù)據(jù)并導(dǎo)入外部傳感器/軟件數(shù)據(jù),并通過(guò)API將其循環(huán)回平臺(tái)。
2.4 自然非侵入式
面部表情分析僅需要用于記錄面部的網(wǎng)絡(luò)攝像機(jī),并且因此可以在廣泛的環(huán)境中執(zhí)行。記錄自然面部表情數(shù)據(jù)不需要侵入性測(cè)量。
2.5 快速、無(wú)偏差的結(jié)果
Affectiva的面部表情分析提供了對(duì)情感表達(dá)的無(wú)偏差測(cè)量。實(shí)時(shí)理解對(duì)刺激的情緒表達(dá),并快速得出結(jié)論。
2.6 大范圍數(shù)據(jù)
Affectiva提供效價(jià)和復(fù)雜面部情緒水平的數(shù)據(jù),一直到單個(gè)面部標(biāo)志,這些數(shù)據(jù)可以在iMotions中進(jìn)行檢查,也可以導(dǎo)出以供進(jìn)一步分析。這意味著您可以根據(jù)需要對(duì)參與者的面部表情進(jìn)行細(xì)致的理解。
三、分析識(shí)別指標(biāo)
3.1 數(shù)據(jù)內(nèi)容
以進(jìn)一步了解下面的圖表顯示了Affectiva能夠從面部表情中收集的數(shù)據(jù)。使用面部標(biāo)志獲取精細(xì)數(shù)據(jù),或通過(guò)
Affectiva的計(jì)算評(píng)估表達(dá)的情緒。訪問(wèn)其他數(shù)據(jù)以確定響應(yīng)刺激的行為。
3.2 分析指標(biāo)計(jì)算模型
Affectiva的算法根據(jù)特定面部動(dòng)作的來(lái)計(jì)算面部表情的可能性。下面的圖表顯示了哪些面部表情會(huì)增加或減
少情緒表達(dá)被檢測(cè)到的可能性。
四、應(yīng)用案例