基于時空外貌表征的視頻行人再識別方法研究.pdf

1、為了有效解決視頻行人再識別任務(wù)中，行人的姿態(tài)變化，相機的視角差異，光照的變化，以及障礙物的遮擋等因素帶來的影響，我們?nèi)诤项伾?、紋理以及梯度等底層特征信息對行人進行外貌描述，并利用費舍爾向量對描述實現(xiàn)進一步的變換，從而得到魯棒的行人外貌特征表示，成功地將空間姿態(tài)信息和時間步態(tài)信息結(jié)合到一起。
　　在此基礎(chǔ)上，我們首次提出了一種新的時空表征方法，將不同行人在時間和空間上同時進行對齊。在時間上，我們根據(jù)步態(tài)周期的不同階段，將視頻分割為多

2、個時間片段;同時在空間上，我們根據(jù)身體部位的不同區(qū)域，將視頻分割為多個空間片段。通過這樣的時間和空間的分割，我們得到了多個視頻塊，每個視頻塊包含有特定動作下特定身體部位的信息，我們稱之為身體動作單元。它同時融合了行人身體部位的空間信息和步態(tài)動作的時間信息，通過這種表征，使得在進行特征比較時，兩行人在時間和空間上實現(xiàn)了對齊。
　　每個身體動作單元可以根據(jù)不同行人的步態(tài)周期而調(diào)整時間分割的長度，也可以隨著動作階段的不同而采用不同的身體

3、部位模型，反之亦然。最終，我們將各動作身體單元中提取到的費舍爾特征串聯(lián)起來，最終得到一個固定長度的向量作為行人的外貌特征。因此，只要所分割的身體部位和動作階段的數(shù)目固定，我們可以采用任意變化的身體動作模型來提取特征，且最終的特征向量仍然是固定長度的，以便于我們進行不同行人之間的匹配和比較。
　　我們最后還提出將無監(jiān)督的行人外貌特征表示與有監(jiān)督的距離尺度學(xué)習(xí)相結(jié)合來進行視頻行人再識別，通過利用有標(biāo)簽的數(shù)據(jù)進行有監(jiān)督學(xué)習(xí)，進一步調(diào)整不

4、同攝像機之間行人外貌特征空間分的情況，使得同一行人特征之間的距離減小，而不同行人特征之間的距離增加，從而在結(jié)果和性能上達(dá)到最佳水平。
　　所提出的表征方法有如下幾個優(yōu)點:1）我們對一個步態(tài)周期內(nèi)的行人外貌進行特征描述，因此，這種描述方法可以完整地覆蓋行人步行狀態(tài)下各種姿勢和形態(tài)，在提取到行人空間信息的同時，也將時間信息有效的提取出來。2）在進行目標(biāo)匹配時，這種表征自動將比對的行人在時間以及空間上進行了對齊，盡可能的減小姿態(tài)的差異和