之前介紹過機(jī)器視覺中常用到的一種特征：LBP

LBP可以有效地處理光照變化，在紋理分析，紋理識(shí)別方面被廣泛應(yīng)用。

但是LBP只能處理單張的二維圖像，對(duì)于視頻或者圖像序列，如何用LBP來提取特征，捕捉視頻序列的運(yùn)動(dòng)信息呢。今天我們就介紹一種稱為LBP-TOP的特征，是芬蘭奧盧大學(xué)的GuoyingZhao等人提出來的，最早是用來處理動(dòng)態(tài)紋理的識(shí)別，但是現(xiàn)在已經(jīng)被廣泛用在基于視頻的人臉表情識(shí)別上面。

LBP-TOP是LBP從二維空間到三維空間的拓展，LBP-TOP的全稱為:localbinarypatternsfromthreeorthogonalplanes,這里的threeorthogonalplanes指的就是三個(gè)正交平面，我們知道，單張的圖像只有X,Y兩個(gè)方向，而一個(gè)視頻或者圖像序列除了X,Y方向之外，還有一個(gè)沿著時(shí)間軸T的方向，而X-Y,X-T和Y-T三個(gè)方向是相互正交的?？梢钥纯慈缦碌膱D：

圖片來自參考文獻(xiàn)[1]

一個(gè)圖像序列，給出三個(gè)正交平面的紋理圖，X-Y就是我們正?？吹降膱D像，X-T是每一行沿著時(shí)間軸掃描而過的紋理，Y-T是每一列沿著時(shí)間軸掃描而過的圖像，簡單來說，我們可以在這三個(gè)平面都提取LBP特征，然后把三個(gè)平面的LBP特征連接起來，就是LBP-TOP。如下圖所示：

圖片來自參考文獻(xiàn)[1]

所以說LBP-TOP是LBP從二維到三維的拓展，與LBP相比，LBP-TOP不僅考慮了X-Y平面的紋理信息，還考慮了X-T,Y-T的紋理信息，而X-T，Y-T的紋理信息，記錄著重要的動(dòng)態(tài)紋理。

從之前介紹的LBP我們知道，提取LBP特征，采用uniformcode編碼的話，會(huì)生成一個(gè)59維的數(shù)組，記錄著LBP的直方圖信息，那么LBP-TOP特征，在三個(gè)正交平面都提取LBP，最終會(huì)生成一個(gè)59&TImes;3的數(shù)組，特征的維數(shù)一下增加了三倍。很多時(shí)候，我們會(huì)把圖像分塊，一個(gè)圖像分成4&TImes;4個(gè)blocks,每個(gè)block都會(huì)生成一個(gè)59&TImes;3的數(shù)組，最后生成的特征的維數(shù)是4&TImes;4×59×3=2832,所以LBP-TOP是一種高維特征。

LBP-TOP源代碼可以在奧盧大學(xué)的官網(wǎng)下載

聲明：博客上用到的圖片都來自參考文獻(xiàn)[1],只能用于學(xué)習(xí)交流，嚴(yán)禁用于任何商業(yè)目的，如需轉(zhuǎn)載或引用，請(qǐng)注明文獻(xiàn)[1]為出處。