三維人臉識別一般采用深度相機獲取人臉深度信息,主要包括雙目相機,基于結構光原理的RGB-D相機和基于光飛行時間原理的TOF相機。
(1)基于深度圖的人臉識別
深度圖像中三維數(shù)據(jù)的z值被投影至二維平面,形成平滑的三維曲面。可使用歸一化網(wǎng)絡和特征提取網(wǎng)絡實現(xiàn)深度圖人臉識別,歸一化網(wǎng)絡將輸入的深度圖像轉化為HHA圖像,再使用卷積神經(jīng)網(wǎng)絡回歸用于獲取歸一化深度圖的參數(shù),特征提取網(wǎng)絡用于獲取表征深度圖人臉的特征向量。
(2)基于RGB-3DMM的人臉識別
3DMM是指三維人臉變形統(tǒng)計模型,早期是用于解決從二維人臉圖像恢復三維形狀的問題,現(xiàn)多被用于對深度圖像或彩色圖像進行人臉模型回歸,實現(xiàn)識別任務。
(3)基于RGB-D的人臉識別
RGB-D圖像是包含了彩色圖像和深度圖,前者是從紅、綠、藍顏色通道獲取的圖像,后者是指包含與視點的場景對象的表面的距離有關的圖像通道,兩者之間是相互配準。通過對彩色圖像和多幀融合后的深度圖像分別進行預訓練和遷移學習,在特征層進行融合,提高人臉識別率。