論文名字:基於自適應對齊的可見紅外多模態行人重識別
論文鏈接: https://ieeexplore.ieee.org/stamp/stamp.jsp?tp=&arnumber=8913562.
1 摘要
可見光紅外行人再識別(VI-Reid)除了由於攝像光譜不同造成的跨模態差異外,仍然存在較大的行人錯位問題,以及傳統的人再識別一樣,由於攝像機視角的不同和行人姿態的不同而引起的變化,使得可見光紅外人再識別(VI-Reid)仍然存在較大的不對準問題。
本文提出了一種 多路徑自適應行人對齊網絡(MAPAN) 來學習區分性特徵表示。 端到端的方式並且不需要額外的手動註釋即可自動對齊行人。
爲了減輕未對齊導致模態內的差異,聯合了對齊過的可見光行人特徵和原始的可見光行人特徵來加強對行人的注意。
爲了減輕可見光和紅外交叉領域之間的差異,將兩個模態的特徵映射到相同的特徵嵌入空間中。(上一篇多模態也是同樣的處理手法)
損失:ID_LOSS+Triplet_Loss
2 理論研究(MAPAN)
2 結果分析