兒童阻塞性睡眠呼吸暫停計(jì)算機(jī)人臉輔助診斷綜述

　　摘要利用人臉圖片輔助診斷兒童阻塞性睡眠呼吸暫停(OSA)可以減輕醫(yī)生的負(fù)擔(dān)，提高診斷的準(zhǔn)確率。首先，簡(jiǎn)要闡述了目前臨床診斷中的方法和局限性;然后，在研究了目前已有方法的基礎(chǔ)上，結(jié)合了計(jì)算機(jī)人臉輔助診斷其他疾病的方法，將計(jì)算機(jī)人臉輔助診斷兒童OSA分為三種方法：基于傳統(tǒng)的計(jì)算機(jī)人臉診斷方法、基于遷移學(xué)習(xí)的診斷方法、基于3D人臉數(shù)據(jù)的診斷方法，綜述了三種方法中的關(guān)鍵步驟，并對(duì)關(guān)鍵步驟中的方法進(jìn)行了對(duì)比研究，為將來(lái)兒童OSA人臉輔助診斷的研究提供了不同的切入點(diǎn);最后，分析了未來(lái)研究中的機(jī)遇和挑戰(zhàn)。

　　關(guān)鍵詞人臉輔助診斷;兒童阻塞性睡眠呼吸暫停;人臉關(guān)鍵點(diǎn)檢測(cè);人臉特征提取;遷移學(xué)習(xí)

　　引言

　　1976年兒童阻塞性睡眠呼吸暫停(ObstructiveSleepApnea，OSA)被Guilleminault等[1]第一次提出，之后阻塞性睡眠呼吸暫停綜合征被定義為上氣道間歇性完全阻塞或部分阻塞，這種疾病會(huì)影響睡眠質(zhì)量，常伴有睡眠碎片和間歇性低氧血癥[2]，由OSA引發(fā)的慢性間歇性夜間低氧血癥和睡眠不足可能會(huì)導(dǎo)致神經(jīng)行為問(wèn)題、心血管疾病和精神疾病綜合癥等重大風(fēng)險(xiǎn)。

　　兒童醫(yī)學(xué)論文： 兒童預(yù)防接種中應(yīng)用安全預(yù)防接種護(hù)理干預(yù)的價(jià)值

　　根據(jù)調(diào)查顯示兒童OSA患病率為1.2%~5.7%[3]，我國(guó)香港地區(qū)的兒童OSA患病率為4.8%[4]�？梢�(jiàn)OSA嚴(yán)重影響兒童的身心健康，并對(duì)未來(lái)的長(zhǎng)期健康產(chǎn)生深遠(yuǎn)影響。所以，對(duì)于兒童OSA患者來(lái)說(shuō)，初期發(fā)現(xiàn)和診斷至關(guān)重要。兒童OSA的診斷一般是通過(guò)多導(dǎo)睡眠圖(Polysomnography，PSG)以及針對(duì)兒科的診斷標(biāo)準(zhǔn)來(lái)實(shí)現(xiàn)的[5]。

　　根據(jù)文獻(xiàn)[6]可知，在面部特征方面，推薦重點(diǎn)關(guān)注腺樣體面容;文獻(xiàn)[7-8]中分析了腺樣體面容，面部特征變化主要集中在眼睛、鼻子、嘴唇。這些面部特征也可用于兒童OSA的預(yù)測(cè)中。臨床數(shù)據(jù)中一般收集人口統(tǒng)計(jì)學(xué)特征如身高、體重、勁圍、腹圍、臀圍和PSG檢測(cè)中的睡眠參數(shù)。在診斷時(shí)，把PSG數(shù)據(jù)中的阻塞性呼吸暫停低通氣指數(shù)(ObstructiveApnea/HypopneaIndex，OAHI)>1次/h作為兒童OSA的診斷界值指標(biāo)，有利于早期發(fā)現(xiàn)和干預(yù)治療。

　　此外呼吸暫停低通氣指數(shù)(ApneaHypopneaIndex，AHI)、阻塞性呼吸暫停指數(shù)(ObstructiveApneaIndex，OAI)和最低血氧飽和度對(duì)兒童OSA診斷也有重要參考作用。對(duì)于兒童OSA嚴(yán)重程度診斷指標(biāo)，參考標(biāo)準(zhǔn)如下：1)輕度為1次/h

　　1相關(guān)領(lǐng)域研究現(xiàn)狀

　　傳統(tǒng)的人臉輔助診斷的研究最先是提取圖像上的淺層特征，如紋理特征、幾何特征、顏色特征進(jìn)行輔助診斷，如Balaei等[9]通過(guò)提取到的臉部寬度、眼睛寬度、頸心角和下頜長(zhǎng)度等幾何特征，使用邏輯回歸分類(lèi)器來(lái)預(yù)測(cè)OSA;如Song等[10]通過(guò)提取內(nèi)眥贅皮、黑素細(xì)胞痣的紋理特征，前額、鼻梁和眼睛之間的幾何特征預(yù)測(cè)特納綜合征;Schneider等[11]提取紋理和幾何特征預(yù)測(cè)指端肥大癥。

　　隨著神經(jīng)網(wǎng)絡(luò)的發(fā)展，可利用神經(jīng)網(wǎng)絡(luò)提取圖像中的深度特征進(jìn)行輔助診斷，如Kumov等[12]使用神經(jīng)網(wǎng)絡(luò)提取圖像的深度特征，并融合了幾何特征，來(lái)預(yù)測(cè)8種遺傳病癥，平均分類(lèi)精度達(dá)到了約93%;Balaei等[9]把正臉和側(cè)臉圖像作為輸入向量，輸入到前饋神經(jīng)網(wǎng)絡(luò)中進(jìn)行分類(lèi)，然后又選擇臉部特定的四個(gè)特征輸入到神經(jīng)網(wǎng)絡(luò)中進(jìn)行分類(lèi)，結(jié)果顯示對(duì)于使用臉部特定位置的四個(gè)特征進(jìn)行預(yù)測(cè)，與直接使用正臉和側(cè)臉圖像進(jìn)行預(yù)測(cè)相比準(zhǔn)確率有所提高。

　　傳統(tǒng)的診斷方法由于可供訓(xùn)練的數(shù)據(jù)集較少，神經(jīng)網(wǎng)絡(luò)不能充分地發(fā)揮其性能，遷徙學(xué)習(xí)的提出，解決了數(shù)據(jù)集短缺的問(wèn)題，充分發(fā)揮了神經(jīng)網(wǎng)絡(luò)的分類(lèi)性能。遷徙學(xué)習(xí)按照遷移方案劃分，可以分為歸納遷移學(xué)習(xí)、直推式遷移學(xué)習(xí)、無(wú)監(jiān)督遷移學(xué)習(xí);如果按照遷移學(xué)習(xí)方法劃分，可以分為實(shí)例學(xué)習(xí)、基于特征表示的遷移、基于參數(shù)的遷移、基于相關(guān)性的遷移。目前使用遷移學(xué)習(xí)來(lái)診斷兒童OSA的相關(guān)研究非常有限，遷移學(xué)習(xí)可以有效地解決兒童OSA數(shù)據(jù)短缺問(wèn)題。

　　與二維圖像相比，3D人臉數(shù)據(jù)包含更多的信息，可以提高診斷的準(zhǔn)確性，也是疾病輔助診斷研究的重要領(lǐng)域。最先的研究是提取3D人臉數(shù)據(jù)上的局部特征進(jìn)行疾病的預(yù)測(cè)，如：Kiaee等[13]提取3D人臉模型上的等高線、曲率和水平曲線，將提取到的特征用拓?fù)鋽?shù)據(jù)分析方法進(jìn)行分類(lèi);Wu[14]利用兒童的3D人臉數(shù)據(jù)，計(jì)算線性和角度測(cè)量值，采用三維形態(tài)計(jì)量學(xué)分析來(lái)評(píng)估高危人群和低風(fēng)險(xiǎn)人群面部特征的差異。隨著深度學(xué)習(xí)的發(fā)展，設(shè)計(jì)更加龐大復(fù)雜的神經(jīng)網(wǎng)絡(luò)，可以提取3D人臉數(shù)據(jù)上的深度表型特征來(lái)進(jìn)行輔助診斷如Kiaee等[13]的研究，3D人臉數(shù)據(jù)理論上可以捕捉到兒童臉上微小的面容變化，更好地預(yù)測(cè)兒童OSA，但由于3D人臉數(shù)據(jù)數(shù)量少，目前的研究不是很理想。

　　2兒童OSA人臉輔助診斷步驟

　　基于傳統(tǒng)的計(jì)算機(jī)人臉診斷方法、基于遷移學(xué)習(xí)的診斷方法、基于3D人臉數(shù)據(jù)的診斷方法中的主要步驟如下：

　　1)基于傳統(tǒng)方法的兒童OSA人臉輔助診斷。步驟一般包括獲取臉部圖像并進(jìn)行人臉檢測(cè)、圖像預(yù)處理、人臉關(guān)鍵點(diǎn)檢測(cè)、面容特征分析，然后提取人臉特征，最后進(jìn)行分類(lèi)預(yù)測(cè)。

　　2)基于遷徙學(xué)習(xí)的兒童OSA輔助診斷。首先使用成熟的神經(jīng)網(wǎng)絡(luò)在大規(guī)模人臉數(shù)據(jù)集上進(jìn)行訓(xùn)練，然后把經(jīng)過(guò)預(yù)訓(xùn)練的神經(jīng)網(wǎng)絡(luò)模型作為人臉特征提取器，再根據(jù)目標(biāo)任務(wù)調(diào)整分類(lèi)器，并利用目標(biāo)域的數(shù)據(jù)集進(jìn)行微調(diào)來(lái)預(yù)測(cè)兒童OSA。

　　3傳統(tǒng)兒童

　　OSA人臉診斷傳統(tǒng)的兒童OSA人臉診斷主要步驟如下：

　　1)圖像獲取。一般都是在醫(yī)療機(jī)構(gòu)，在統(tǒng)一的環(huán)境下，由專(zhuān)業(yè)的人員使用統(tǒng)一的設(shè)備進(jìn)行拍攝，采集正臉和側(cè)臉的面部圖像。對(duì)于圖片的標(biāo)簽可以根據(jù)文獻(xiàn)[6]，利用OAHI指標(biāo)進(jìn)行標(biāo)注。2)人臉檢測(cè)。把圖像中的人臉區(qū)域裁剪出來(lái)。人臉檢測(cè)是輔助診斷中重要的基礎(chǔ)任務(wù)之一，人臉檢測(cè)算法可以分為基于特征的人臉檢測(cè)和基于圖像的人臉檢測(cè)(基于AdaBoost算法和基于神經(jīng)網(wǎng)絡(luò)的算法)。人臉檢測(cè)常用的算法有VJ(PaulViola和MichaelJones所提出的算法)人臉檢測(cè)[15].

　　3)圖像預(yù)處理。消除光照等環(huán)境因素對(duì)實(shí)驗(yàn)的影響，提高圖像的清晰度，一般對(duì)人臉圖像進(jìn)行翻轉(zhuǎn)和圖像增強(qiáng)。傳統(tǒng)的圖像增強(qiáng)方法有歸一化、灰度變換、直方圖均衡化等;深度學(xué)習(xí)中，在不改變網(wǎng)絡(luò)模型的情況下，通過(guò)圖像增強(qiáng)的方法提高了分類(lèi)的準(zhǔn)確性，在深度學(xué)習(xí)中常見(jiàn)的數(shù)據(jù)增強(qiáng)方法有幾何增強(qiáng)、色彩增強(qiáng)、mixup、隨機(jī)擦除等。

　　4)人臉關(guān)鍵點(diǎn)檢測(cè)。檢測(cè)人臉關(guān)鍵點(diǎn)，在兒童OSA診斷中也是一項(xiàng)重要的基礎(chǔ)任務(wù)。對(duì)于兒童OSA的面容特征，重點(diǎn)關(guān)注眼睛、嘴唇、鼻梁等關(guān)鍵區(qū)域。人臉關(guān)鍵點(diǎn)檢測(cè)大致可以分為三類(lèi)：基于統(tǒng)計(jì)模型的方法，基于級(jí)聯(lián)形狀回歸的方法，基于深度學(xué)習(xí)的方法。基于統(tǒng)計(jì)模型的方法包括點(diǎn)分布模型(ActiveShapeModel，ASM)[20]和形狀統(tǒng)計(jì)模型(ActiveAppearanceModel，AAM)[21]，ASM[20]把人臉關(guān)鍵點(diǎn)坐標(biāo)組合成形狀向量，隨后提出的AAM[21]算法加入了形狀約束，適用范圍都有所提高;基于級(jí)聯(lián)回歸的方法把關(guān)鍵點(diǎn)問(wèn)題轉(zhuǎn)化為一個(gè)回歸問(wèn)題。

　　在訓(xùn)練階段，回歸模型學(xué)習(xí)預(yù)測(cè)關(guān)鍵點(diǎn)的位置函數(shù)，預(yù)測(cè)時(shí)，直接用這個(gè)函數(shù)輸出關(guān)鍵點(diǎn)的位置坐標(biāo)。常用的人臉關(guān)鍵點(diǎn)檢測(cè)的個(gè)數(shù)有兩種：一種是檢測(cè)人臉上的5個(gè)關(guān)鍵點(diǎn);另一種是檢測(cè)人臉上的68個(gè)關(guān)鍵點(diǎn)。68個(gè)人臉上的關(guān)鍵點(diǎn)標(biāo)記出眼睛、嘴巴、鼻子、眉毛、大致的臉部輪廓[10]。根據(jù)的兒童OSA的面容特征，可以檢測(cè)眼睛、鼻子、嘴唇上部、腮部等關(guān)鍵點(diǎn)，在兒童OSA的診斷中，檢測(cè)出人臉上的68個(gè)關(guān)鍵點(diǎn)可以更好地捕捉到兒童變化的面容特征。

　　如Dlib庫(kù)中的級(jí)聯(lián)回歸梯度下降樹(shù)(GradientBoostingDecisionTree，GBDT)[22]檢測(cè)人臉的68個(gè)關(guān)鍵點(diǎn)，首先在特征池中挑選兩個(gè)點(diǎn)，然后計(jì)算每張圖片與這兩個(gè)點(diǎn)之間的像素差，再隨機(jī)產(chǎn)生一個(gè)數(shù)值，如果像素差大于這個(gè)數(shù)值則向右分類(lèi)，反之向左一直分裂至葉子節(jié)點(diǎn)，且二叉樹(shù)深度已經(jīng)確定，不斷更新回歸樹(shù)，最終輸出模型，級(jí)聯(lián)回歸的算法還有基于回歸樹(shù)的人臉對(duì)齊(EnsembleofRegressionTrees，ERT)算法等。

　　基于深度學(xué)習(xí)的方法在關(guān)鍵點(diǎn)檢測(cè)上表現(xiàn)優(yōu)異。如當(dāng)前在檢測(cè)人臉68個(gè)關(guān)鍵點(diǎn)中表現(xiàn)優(yōu)越的實(shí)用的人臉特征點(diǎn)標(biāo)記(PracticalFacialLandmarkDetector，PFLD)模型[23]，其在損失函數(shù)中，通過(guò)給少量樣本包括側(cè)臉、正臉、頭朝上、頭朝下、表情、遮擋等賦予更多的屬性權(quán)重，角度偏差大的樣本賦予更多的角度權(quán)重，同時(shí)將3D姿勢(shì)的估算與2D距離的測(cè)量結(jié)合起來(lái)，對(duì)于姿勢(shì)較大和遮擋的人臉圖像關(guān)鍵點(diǎn)識(shí)別的精度也很高。人臉關(guān)鍵點(diǎn)檢測(cè)的精確與否對(duì)于下一步的特征提取至關(guān)重要，人臉關(guān)鍵點(diǎn)檢測(cè)作為基礎(chǔ)工作中重要的一環(huán)，影響著兒童OSA預(yù)測(cè)的準(zhǔn)確度。

　　作者：趙津1，宋文愛(ài)1，邰雋2*，楊吉江3，王青3，李曉丹4，雷毅3，邱悅4

轉(zhuǎn)載請(qǐng)注明來(lái)自發(fā)表學(xué)術(shù)論文網(wǎng)：http:///yxlw/28001.html