麵(mian)部(bu)表(biao)情(qing)分(fen)析(xi)的(di)挑(tiao)戰(zhan)與(yu)技(ji)術(zhu)趨(qu)勢(shi)
最(zui)近(jin)應(ying)邀(yao)提(ti)交(jiao)了(liao)一(yi)個(ge)表(biao)情(qing)分(fen)析(xi)綜(zeng)述(shu),在(zai)這(zhe)裏(li)把(ba)核(he)心(xin)部(bu)分(fen)提(ti)前(qian)放(fang)一(yi)下(xia),你(ni)若(ruo)細(xi)看(kan)不(bu)信(xin)你(ni)沒(mo)有(you)想(xiang)法(fa)。
從(zong)實(shi)際(ji)使(shi)用(yong)精(jing)度(duo)和(hu)學(xue)術(zhu)上(shang)非(fei)受(shou)控(kong)環(huan)境(jing)人(ren)臉(lian)表(biao)情(qing)識(zhi)別(bie)精(jing)度(duo)來(lai)看(kan),目(mu)前(qian)人(ren)臉(lian)表(biao)情(qing)識(zhi)別(bie)遠(yuan)沒(mo)有(you)達(da)到(dao)像(xiang)人(ren)臉(lian)識(zhi)別(bie)一(yi)樣(yang)的(di)高(gao)度(duo)。其(qi)主(zhu)要(yao)問(wen)題(ti)在(zai)於(yu):可(ke)靠(kao)的(di)表(biao)情(qing)數(shuo)據(ju)量(liang)少(shao)、表(biao)情(qing)圖(tu)片(pian)存(cun)在(zai)不(bu)確(que)定(ding)性(xing)問(wen)題(ti)、非(fei)受(shou)控(kong)環(huan)境(jing)下(xia)人(ren)臉(lian)遮(zhe)擋(dang)和(hu)姿(zi)態(tai)問(wen)題(ti)、以(yi)及(ji)方(fang)法(fa)的(di)對(dui)比(bi)公(gong)平(ping)性(xing)和(hu)可(ke)重(chong)複(fu)性(xing)問(wen)題(ti)。
1 可(ke)靠(kao)的(di)表(biao)情(qing)數(shuo)據(ju)規(gui)模(mu)較(jiao)小(xiao)
目(mu)前(qian),經(jing)心(xin)理(li)學(xue)家(jia)驗(yan)證(zheng)的(di)數(shuo)據(ju)庫(ku),如(ru)CK+等(deng),是(shi)*的(di)可(ke)靠(kao)表(biao)情(qing)數(shuo)據(ju)。但(dan)是(shi),這(zhe)些(xie)數(shuo)據(ju)庫(ku)的(di)規(gui)模(mu)非(fei)常(chang)小(xiao)且(qie)是(shi)實(shi)驗(yan)室(shi)受(shou)控(kong)環(huan)境(jing)下(xia)的(di)正(zheng)臉(lian)拍(pai)攝(she),在(zai)該(gai)類(lei)型(xing)數(shuo)據(ju)庫(ku)上(shang)訓(xun)練(lian)的(di)模(mu)型(xing)一(yi)般(pan)現(xian)實(shi)應(ying)用(yong)效(xiao)果(guo)比(bi)較(jiao)差(chai)。比(bi)如(ru)使(shi)用(yong)深(shen)度(duo)學(xue)習(xi)方(fang)法(fa),模(mu)型(xing)學(xue)習(xi)的(di)特(te)征(zheng)可(ke)能(neng)是(shi)記(ji)住(zhu)特(te)定(ding)人(ren)的(di)信(xin)息(xi)以(yi)及(ji)特(te)定(ding)的(di)表(biao)情(qing)表(biao)演(yan)方(fang)式(shi),泛(fan)化(hua)能(neng)力(li)較(jiao)差(chai)。最(zui)近(jin),在(zai)非(fei)受(shou)控(kong)環(huan)境(jing)下(xia)采(cai)集(ji)的(di)網(wang)絡(lao)數(shuo)據(ju),如(ru)FERPlus和(hu)RAF-DB之(zhi)類(lei)的(di)數(shuo)據(ju)庫(ku),經(jing)過(guo)多(duo)人(ren)眾(zhong)包(bao)標(biao)注(zhu)可(ke)靠(kao)性(xing)有(you)所(suo)增(zeng)加(jia),但(dan)是(shi)標(biao)注(zhu)數(shuo)量(liang)也(ye)隻(zhi)是(shi)在(zai)3萬(mo)左(zuo)右(you)。利(li)用(yong)數(shuo)據(ju)驅(qu)動(dong)型(xing)深(shen)度(duo)學(xue)習(xi)方(fang)法(fa),在(zai)該(gai)類(lei)數(shuo)據(ju)庫(ku)上(shang)直(zhi)接(jie)訓(xun)練(lian)的(di)精(jing)度(duo)也(ye)不(bu)高(gao)。AffectNet雖(sui)然(ran)標(biao)注(zhu)44萬(mo)基(ji)本(ben)表(biao)情(qing),但(dan)標(biao)注(zhu)質(zhi)量(liang)相(xiang)對(dui)差(chai),使(shi)得(dei)模(mu)型(xing)難(nan)以(yi)學(xue)習(xi)到(dao)真(zhen)正(zheng)的(di)表(biao)情(qing)特(te)征(zheng)。
近(jin)年(nian)來(lai),緩(huan)解(xie)表(biao)情(qing)數(shuo)據(ju)庫(ku)規(gui)模(mu)問(wen)題(ti)的(di)流(liu)行(hang)策(ce)略(lüe)就(jiu)是(shi)將(qiang)物(wu)體(ti)識(zhi)別(bie)模(mu)型(xing)或(huo)者(zhe)人(ren)臉(lian)識(zhi)別(bie)模(mu)型(xing)遷(qian)移(yi)到(dao)表(biao)情(qing)識(zhi)別(bie)任(ren)務(wu),即(ji)遷(qian)移(yi)學(xue)習(xi)方(fang)法(fa)。(Ding 等(deng),2017)提(ti)出(chu)一(yi)種(zhong)FaceNet2ExpNet框(kuang)架(jia)。該(gai)框(kuang)架(jia)首(shou)先(xian)在(zai)大(dai)規(gui)模(mu)人(ren)臉(lian)識(zhi)別(bie)數(shuo)據(ju)庫(ku)上(shang)進(jin)行(hang)訓(xun)練(lian),然(ran)後(hou)聯(lian)合(ge)訓(xun)練(lian)人(ren)臉(lian)表(biao)情(qing)和(hu)人(ren)臉(lian)識(zhi)別(bie),最(zui)後(hou)在(zai)人(ren)臉(lian)表(biao)情(qing)任(ren)務(wu)上(shang)進(jin)行(hang)微(wei)調(diao)以(yi)減(jian)少(shao)模(mu)型(xing)對(dui)人(ren)臉(lian)身(shen)份(fen)信(xin)息(xi)的(di)依(yi)賴(lai)。在(zai)EmotiW2017的(di)音(yin)視(shi)頻(pin)情(qing)感(gan)識(zhi)別(bie)競(jing)賽(sai)中(zhong),(Knyazev 等(deng),2017)使(shi)用(yong)超(chao)大(dai)規(gui)模(mu)的(di)私(si)有(you)人(ren)臉(lian)數(shuo)據(ju)庫(ku)訓(xun)練(lian)的(di)VGGFace網(wang)絡(lao)在(zai)比(bi)賽(sai)中(zhong)獲(huo)得(dei)了(liao)亞(ya)軍(jun)。在(zai)EmotiW2018的(di)音(yin)視(shi)頻(pin)情(qing)感(gan)識(zhi)別(bie)比(bi)賽(sai)中(zhong),前(qian)五(wu)名(ming)的(di)方(fang)法(fa)基(ji)本(ben)上(shang)都(du)使(shi)用(yong)了(liao)人(ren)臉(lian)識(zhi)別(bie)模(mu)型(xing)和(hu)物(wu)體(ti)識(zhi)別(bie)模(mu)型(xing)進(jin)行(hang)初(chu)始(shi)化(hua)。(Zhou 等(deng),2019)在(zai)EmotiW2019的(di)音(yin)視(shi)頻(pin)情(qing)感(gan)識(zhi)別(bie)比(bi)賽(sai)中(zhong)對(dui)人(ren)臉(lian)識(zhi)別(bie)模(mu)型(xing)、人(ren)臉(lian)識(zhi)別(bie)預(yu)訓(xun)練(lian)的(di)數(shuo)據(ju)庫(ku)等(deng)進(jin)行(hang)了(liao)綜(zeng)合(ge)評(ping)估(gu)。另(ling)外(wai),除(chu)了(liao)遷(qian)移(yi)學(xue)習(xi)策(ce)略(lüe),利(li)用(yong)半(ban)監(jian)督(du)方(fang)法(fa)也(ye)是(shi)未(wei)來(lai)可(ke)能(neng)的(di)發(fa)展(zhan)趨(qu)勢(shi),其(qi)主(zhu)要(yao)原(yuan)因(yin)是(shi)1)大(dai)規(gui)模(mu)人(ren)臉(lian)識(zhi)別(bie)數(shuo)據(ju)庫(ku)中(zhong)包(bao)含(han)了(liao)非(fei)常(chang)多(duo)的(di)表(biao)情(qing)人(ren)臉(lian)和(hu)2)像(xiang)AffectNet和(hu)EmotioNet等(deng)數(shuo)據(ju)庫(ku)還(huan)有(you)很(hen)大(dai)一(yi)部(bu)分(fen)表(biao)情(qing)人(ren)臉(lian)沒(mo)有(you)進(jin)行(hang)標(biao)注(zhu)。最(zui)近(jin),(Liu 等(deng),2020)建(jian)立(li)了(liao)一(yi)些(xie)半(ban)監(jian)督(du)人(ren)臉(lian)表(biao)情(qing)識(zhi)別(bie)基(ji)本(ben)策(ce)略(lüe)。
2 表(biao)情(qing)的(di)不(bu)確(que)定(ding)性(xing)問(wen)題(ti)
對(dui)於(yu)基(ji)本(ben)表(biao)情(qing)識(zhi)別(bie)而(er)言(yan),模(mu)擬(ni)兩(liang)可(ke)的(di)表(biao)情(qing)、低(di)質(zhi)量(liang)表(biao)情(qing)圖(tu)片(pian)、以(yi)及(ji)標(biao)注(zhu)者(zhe)的(di)情(qing)感(gan)主(zhu)觀(guan)性(xing)導(dao)致(zhi)表(biao)情(qing)類(lei)別(bie)很(hen)多(duo)時(shi)候(hou)不(bu)是(shi)wei一(yi)確(que)定(ding)的(di),即(ji)表(biao)情(qing)存(cun)在(zai)不(bu)確(que)定(ding)性(xing)(Wang和(hu)Peng 等(deng),2020)。表(biao)情(qing)的(di)不(bu)確(que)定(ding)性(xing)問(wen)題(ti)和(hu)噪(zao)聲(sheng)標(biao)簽(qian)問(wen)題(ti)非(fei)常(chang)類(lei)似(shi),它(ta)們(men)的(di)差(chai)別(bie)主(zhu)要(yao)體(ti)現(xian)在(zai):1)表(biao)情(qing)是(shi)本(ben)身(shen)也(ye)存(cun)在(zai)模(mu)擬(ni)兩(liang)可(ke)的(di)不(bu)確(que)定(ding)性(xing),而(er)一(yi)般(pan)物(wu)體(ti)分(fen)類(lei)的(di)噪(zao)聲(sheng)標(biao)簽(qian)是(shi)由(you)於(yu)沒(mo)有(you)進(jin)行(hang)人(ren)工(gong)標(biao)注(zhu)的(di)原(yuan)因(yin);2)物(wu)體(ti)分(fen)類(lei)的(di)噪(zao)聲(sheng)可(ke)以(yi)用(yong)人(ren)工(gong)標(biao)注(zhu)方(fang)式(shi)進(jin)行(hang)有(you)效(xiao)消(xiao)除(chu),然(ran)而(er)由(you)於(yu)標(biao)注(zhu)者(zhe)的(di)主(zhu)觀(guan)性(xing),大(dai)規(gui)模(mu)的(di)表(biao)情(qing)分(fen)類(lei)裏(li)麵(mian)的(di)噪(zao)聲(sheng)很(hen)難(nan)用(yong)標(biao)注(zhu)的(di)方(fang)式(shi)進(jin)行(hang)消(xiao)除(chu)。表(biao)情(qing)的(di)不(bu)確(que)定(ding)性(xing)問(wen)題(ti)也(ye)導(dao)致(zhi)了(liao)很(hen)難(nan)有(you)較(jiao)大(dai)規(gui)模(mu)的(di)可(ke)靠(kao)表(biao)情(qing)數(shuo)據(ju)庫(ku)。
為(wei)了(liao)緩(huan)解(xie)表(biao)情(qing)的(di)不(bu)確(que)定(ding)性(xing)問(wen)題(ti),(Zeng 等(deng),2018)和(hu)(Wang和(hu)Peng等(deng),2020)分(fen)別(bie)進(jin)行(hang)了(liao)初(chu)步(bu)探(tan)索(suo)。其(qi)中(zhong),(Zeng 等(deng),2018)利(li)用(yong)多(duo)數(shuo)據(ju)庫(ku)上(shang)的(di)深(shen)度(duo)學(xue)習(xi)模(mu)型(xing)預(yu)測(ce)結(jie)果(guo)輔(fu)助(zhu)訓(xun)練(lian)潛(qian)在(zai)的(di)正(zheng)確(que)標(biao)簽(qian),以(yi)提(ti)升(sheng)特(te)征(zheng)學(xue)習(xi)的(di)魯(lu)棒(bang)性(xing)。(Wang和(hu)Peng等(deng),2020)在(zai)每(mei)個(ge)Batch使(shi)用(yong)自(zi)注(zhu)意(yi)力(li)機(ji)製(zhi)和(hu)重(chong)標(biao)注(zhu)方(fang)案(an),抑(yi)製(zhi)表(biao)情(qing)不(bu)確(que)定(ding)的(di)部(bu)分(fen)樣(yang)本(ben)。鑒(jian)於(yu)基(ji)本(ben)表(biao)情(qing)分(fen)類(lei)不(bu)可(ke)避(bi)免(wen)出(chu)現(xian)的(di)不(bu)確(que)定(ding)性(xing)問(wen)題(ti),將(qiang)大(dai)規(gui)模(mu)表(biao)情(qing)問(wen)題(ti)定(ding)義(yi)成(cheng)多(duo)標(biao)簽(qian)表(biao)情(qing)分(fen)類(lei)問(wen)題(ti)(Li 等(deng),2018)或(huo)者(zhe)符(fu)合(ge)表(biao)情(qing)問(wen)題(ti)EmotioNet(Benitez 等(deng),2016)也(ye)是(shi)兩(liang)種(zhong)可(ke)選(xuan)策(ce)略(lüe)。
3 非(fei)受(shou)控(kong)環(huan)境(jing)的(di)人(ren)臉(lian)遮(zhe)擋(dang)和(hu)姿(zi)態(tai)問(wen)題(ti)
類(lei)似(shi)於(yu)人(ren)臉(lian)識(zhi)別(bie),非(fei)受(shou)控(kong)自(zi)然(ran)環(huan)境(jing)下(xia)人(ren)臉(lian)表(biao)情(qing)識(zhi)別(bie)受(shou)人(ren)臉(lian)的(di)遮(zhe)擋(dang)和(hu)姿(zi)態(tai)影(ying)響(xiang)較(jiao)大(dai)。傳(zhuan)統(tong)方(fang)法(fa)研(yan)究(jiu)人(ren)臉(lian)表(biao)情(qing)識(zhi)別(bie)的(di)遮(zhe)擋(dang)問(wen)題(ti)一(yi)般(pan)是(shi)使(shi)用(yong)人(ren)工(gong)設(she)定(ding)局(ju)部(bu)黑(hei)塊(kuai)方(fang)式(shi)(Irene等(deng),2008),其(qi)不(bu)一(yi)定(ding)適(kuo)合(ge)現(xian)實(shi)中(zhong)的(di)遮(zhe)擋(dang)情(qing)況(kuang),如(ru)戴(dai)眼(yan)鏡(jing)、帶(dai)口(kou)罩(zhao)等(deng)。最(zui)近(jin),(Wang和(hu)Peng等(deng),2020)統(tong)計(ji)了(liao)在(zai)FERPlus數(shuo)據(ju)庫(ku)的(di)測(ce)試(shi)集(ji)上(shang)的(di)遮(zhe)擋(dang)和(hu)大(dai)姿(zi)態(tai)識(zhi)別(bie)情(qing)況(kuang),結(jie)果(guo)表(biao)明(ming)平(ping)均(jun)精(jing)度(duo)為(wei)86%左(zuo)右(you)的(di)模(mu)型(xing)在(zai)遮(zhe)擋(dang)和(hu)大(dai)姿(zi)態(tai)情(qing)況(kuang)下(xia)的(di)精(jing)度(duo)隻(zhi)有(you)73%-75%。
為(wei)了(liao)緩(huan)解(xie)遮(zhe)擋(dang)和(hu)姿(zi)態(tai)對(dui)人(ren)臉(lian)表(biao)情(qing)識(zhi)別(bie)的(di)影(ying)響(xiang),利(li)用(yong)人(ren)臉(lian)局(ju)部(bu)信(xin)息(xi)是(shi)比(bi)較(jiao)*的(di)有(you)效(xiao)策(ce)略(lüe)。(Li 等(deng),2019)和(hu)(Wang和(hu)Peng等(deng),2020)分(fen)別(bie)在(zai)特(te)征(zheng)層(ceng)次(ci)和(hu)圖(tu)片(pian)層(ceng)次(ci)使(shi)用(yong)局(ju)部(bu)塊(kuai)注(zhu)意(yi)力(li)機(ji)製(zhi),以(yi)提(ti)升(sheng)模(mu)型(xing)對(dui)遮(zhe)擋(dang)和(hu)姿(zi)態(tai)的(di)魯(lu)棒(bang)性(xing)。(Wang 等(deng),2020)使(shi)用(yong)人(ren)臉(lian)關(guan)鍵(jian)點(dian)作(zuo)為(wei)注(zhu)意(yi)圖(tu)引(yin)導(dao)深(shen)度(duo)網(wang)絡(lao),使(shi)得(dei)網(wang)絡(lao)集(ji)中(zhong)關(guan)注(zhu)人(ren)臉(lian)關(guan)鍵(jian)區(ou)域(yu)提(ti)高(gao)模(mu)型(xing)的(di)魯(lu)棒(bang)性(xing)。另(ling)一(yi)個(ge)可(ke)能(neng)的(di)策(ce)略(lüe)就(jiu)是(shi)利(li)用(yong)大(dai)規(gui)模(mu)人(ren)臉(lian)識(zhi)別(bie)數(shuo)據(ju),先(xian)學(xue)習(xi)一(yi)個(ge)對(dui)姿(zi)態(tai)和(hu)遮(zhe)擋(dang)魯(lu)棒(bang)的(di)人(ren)臉(lian)識(zhi)別(bie)模(mu)型(xing)然(ran)後(hou)再(zai)對(dui)人(ren)臉(lian)表(biao)情(qing)識(zhi)別(bie)進(jin)行(hang)微(wei)調(diao)。筆(bi)者(zhe)觀(guan)察(cha)到(dao),(Wang 等(deng),2020)使(shi)用(yong)VGGFace2數(shuo)據(ju)庫(ku)進(jin)行(hang)人(ren)臉(lian)識(zhi)別(bie)模(mu)型(xing)預(yu)訓(xun)練(lian),最(zui)終(zhong)得(dei)到(dao)的(di)人(ren)臉(lian)表(biao)情(qing)識(zhi)別(bie)性(xing)能(neng)比(bi)比(bi)其(qi)他(ta)數(shuo)據(ju)庫(ku)預(yu)訓(xun)練(lian)的(di)模(mu)型(xing)要(yao)好(hao)2%左(zuo)右(you),這(zhe)充(chong)分(fen)表(biao)明(ming)了(liao)先(xian)學(xue)一(yi)個(ge)對(dui)姿(zi)態(tai)和(hu)遮(zhe)擋(dang)魯(lu)棒(bang)的(di)人(ren)臉(lian)識(zhi)別(bie)模(mu)型(xing)是(shi)可(ke)行(hang)的(di)。
4 表(biao)情(qing)識(zhi)別(bie)方(fang)法(fa)的(di)對(dui)比(bi)性(xing)不(bu)強(jiang)
由(you)於(yu)深(shen)度(duo)學(xue)習(xi)方(fang)法(fa)中(zhong)超(chao)參(shen)數(shuo)比(bi)較(jiao)多(duo),最(zui)終(zhong)性(xing)能(neng)對(dui)各(ge)個(ge)超(chao)參(shen)數(shuo)都(du)有(you)一(yi)定(ding)的(di)影(ying)響(xiang),且(qie)這(zhe)種(zhong)影(ying)響(xiang)有(you)時(shi)候(hou)是(shi)新(xin)方(fang)法(fa)的(di)關(guan)鍵(jian)因(yin)素(su),這(zhe)就(jiu)導(dao)致(zhi)了(liao)表(biao)情(qing)識(zhi)別(bie)方(fang)法(fa)存(cun)在(zai)對(dui)比(bi)性(xing)不(bu)強(jiang)以(yi)及(ji)可(ke)重(chong)複(fu)性(xing)不(bu)強(jiang)問(wen)題(ti)。雖(sui)然(ran)這(zhe)個(ge)問(wen)題(ti)是(shi)深(shen)度(duo)學(xue)習(xi)的(di)一(yi)個(ge)普(pu)遍(bian)性(xing)問(wen)題(ti),但(dan)是(shi)由(you)於(yu)前(qian)麵(mian)三(san)個(ge)問(wen)題(ti)的(di)存(cun)在(zai),筆(bi)者(zhe)認(ren)為(wei)超(chao)參(shen)數(shuo)對(dui)表(biao)情(qing)識(zhi)別(bie)性(xing)能(neng)的(di)影(ying)響(xiang)相(xiang)對(dui)較(jiao)大(dai)。比(bi)如(ru)其(qi)他(ta)參(shen)數(shuo)相(xiang)同(tong)情(qing)況(kuang)下(xia),在(zai)RAF-DB數(shuo)據(ju)庫(ku)上(shang)使(shi)用(yong)batchsize為(wei)256訓(xun)練(lian)的(di)ResNet18模(mu)型(xing)(ImageNet預(yu)訓(xun)練(lian))比(bi)batchsize為(wei)32訓(xun)練(lian)的(di)模(mu)型(xing)(RAF-DB測(ce)試(shi)精(jing)度(duo)約(yao)86%)平(ping)均(jun)精(jing)度(duo)低(di)5-10個(ge)百(bai)分(fen)點(dian)。如(ru)此(ci)簡(jian)單(shan)的(di)基(ji)本(ben)方(fang)法(fa)就(jiu)能(neng)獲(huo)得(dei)86%的(di)平(ping)均(jun)精(jing)度(duo),已(yi)經(jing)優(you)於(yu)最(zui)近(jin)很(hen)多(duo)發(fa)表(biao)方(fang)法(fa)。
為(wei)了(liao)提(ti)高(gao)人(ren)臉(lian)表(biao)情(qing)識(zhi)別(bie)方(fang)法(fa)的(di)對(dui)比(bi)性(xing),筆(bi)者(zhe)認(ren)為(wei)有(you)必(bi)要(yao)在(zai)對(dui)比(bi)時(shi)候(hou)將(qiang)每(mei)種(zhong)預(yu)訓(xun)練(lian)模(mu)型(xing)和(hu)對(dui)性(xing)能(neng)敏(min)感(gan)的(di)參(shen)數(shuo)進(jin)行(hang)討(tao)論(lun)評(ping)估(gu)。為(wei)了(liao)避(bi)免(wen)有(you)些(xie)方(fang)法(fa)是(shi)在(zai)比(bi)較(jiao)低(di)的(di)基(ji)線(xian)方(fang)法(fa)才(cai)有(you)效(xiao),有(you)必(bi)要(yao)在(zai)簡(jian)單(shan)有(you)效(xiao)的(di)基(ji)線(xian)方(fang)法(fa)(比(bi)如(ru)使(shi)用(yong)預(yu)訓(xun)練(lian)的(di)ImageNet模(mu)型(xing)、人(ren)臉(lian)識(zhi)別(bie)模(mu)型(xing))基(ji)礎(chu)上(shang)進(jin)行(hang)比(bi)較(jiao)。
總(zong)結(jie)與(yu)展(zhan)望(wang)
目(mu)前(qian),雖(sui)然(ran)非(fei)受(shou)控(kong)自(zi)然(ran)環(huan)境(jing)下(xia)的(di)表(biao)情(qing)分(fen)析(xi)得(dei)到(dao)較(jiao)快(kuai)發(fa)展(zhan),但(dan)是(shi)眾(zhong)多(duo)問(wen)題(ti)和(hu)挑(tiao)戰(zhan)仍(reng)然(ran)有(you)待(dai)解(xie)決(jue)。人(ren)臉(lian)表(biao)情(qing)分(fen)析(xi)是(shi)一(yi)個(ge)比(bi)較(jiao)實(shi)用(yong)的(di)任(ren)務(wu),未(wei)來(lai)發(fa)展(zhan)除(chu)了(liao)要(yao)討(tao)論(lun)方(fang)法(fa)的(di)精(jing)度(duo)也(ye)要(yao)關(guan)注(zhu)方(fang)法(fa)的(di)耗(hao)時(shi)以(yi)及(ji)存(cun)儲(chu)消(xiao)耗(hao)。在(zai)全(quan)麵(mian)深(shen)度(duo)學(xue)習(xi)化(hua)的(di)時(shi)代(dai),人(ren)臉(lian)AU檢(jian)測(ce)也(ye)在(zai)飛(fei)快(kuai)發(fa)展(zhan),人(ren)臉(lian)表(biao)情(qing)識(zhi)別(bie)未(wei)來(lai)可(ke)以(yi)考(kao)慮(lv)用(yong)非(fei)受(shou)控(kong)環(huan)境(jing)下(xia)高(gao)精(jing)度(duo)的(di)人(ren)臉(lian)AU檢(jian)測(ce)結(jie)果(guo)進(jin)行(hang)表(biao)情(qing)類(lei)別(bie)推(tui)斷(duan)。由(you)於(yu)人(ren)臉(lian)表(biao)情(qing)通(tong)常(chang)比(bi)較(jiao)複(fu)雜(za)多(duo)樣(yang),單(shan)一(yi)標(biao)簽(qian)很(hen)難(nan)進(jin)行(hang)描(miao)述(shu),未(wei)來(lai)多(duo)標(biao)簽(qian)人(ren)臉(lian)表(biao)情(qing)問(wen)題(ti)應(ying)該(gai)受(shou)到(dao)更(geng)多(duo)關(guan)注(zhu)。另(ling)外(wai),表(biao)情(qing)和(hu)情(qing)感(gan)本(ben)身(shen)是(shi)連(lian)續(xu)性(xing)的(di),未(wei)來(lai)應(ying)該(gai)加(jia)強(jiang)對(dui)非(fei)受(shou)控(kong)條(tiao)件(jian)人(ren)臉(lian)的(di)二(er)維(wei)V-A情(qing)感(gan)研(yan)究(jiu)。