不久前,江蘇省某市公安通過 AI 技術分析監控攝像頭中的信息,抓獲了一個偷盜電動車的嫌疑人員。監控攝像頭在現場拍到的是嫌疑人背對攝像頭的情況,未有清晰正面的人臉,但圖片顯示了他的穿著、發型、身高等信息,而警方運用的技術則是計算機視覺領域中的行人再識別技術(Re-ID),通過Re-ID技術警方找到了關聯攝像頭正好拍到他的正臉,以此確認身份,迅速將嫌疑人抓獲。這也是行人再識別技術在實戰場景中的一個典型應用,而提供給警方技術支持的則是國內人工智能企業澎思科技(Pensees)。
行人再識別,澎思科技 ReID算法的三大突破
行人再識別起源于多攝像頭跟蹤,指在非重疊視角域多攝像頭網絡下進行的行人匹配,即確認不同位置的攝像頭在不同的時刻拍攝到的行人目標是否為同一人。行人再識別涉及計算機視覺、機器學習、模式識別等多個學科領域。在行人再識別(ReID)技術研究領域,首位命中率(Rank-1 Accuracy)和平均精度均值(Mean Average Precision,mAP)是衡量算法水平的核心指標。
近日,在行人再識別(Person Re-identification,簡稱ReID)算法上澎思科技取得了突破,在三大主流ReID數據集測試 Market1501、DukeMTMC-reID 和 CUHK03 中,算法關鍵指標首位命中率(Rank-1 Accuracy)刷新了世界紀錄。
在三大數據集上,Rank-1 指標分別達到 96.73%、92.01% 和 84.57%超過了阿里巴巴、騰訊、大華、云從科技等頭部廠家;在 CUHK03 數據集的實驗中,mAP 也超過了之前的成績。
澎思科技 Market1501 部分測試結果
澎思科技通過對算法的自研創新和融合探索,算法上的突破有以下三點:
1、金字塔水平分塊策略:采用 human parsing 對人體分割,結合金字塔水平分塊策略,使得網絡準確提取細粒度區域特征的能力大幅提升;
如圖所示, 特征圖水平分割 6 等份,其冪集一共有種組合,去掉全集和空集以后還有種組合方式,這些特征區域可以組合成為新的特征圖。對每個新的特征圖進行常規操作(全局池化=>卷積=>批歸一化=>激活函數=>全連接層=>ID 監督信號)。通過多監督信號的參與,可以大幅提高模型的精度和魯棒性。
2、(1)漸進式訓練策略;(2)圖網絡結構
(1)訓練階段,借鑒 curriculum learning 思路,難樣本比例逐步提升,使得損失函數更易收斂。參與訓練的樣本按照學習難易度、按順序進入和退出訓練循環,模型在訓練的同時評估各樣本的難度,如此可以保證模型能夠有效挖掘樣本特征完成ReID任務。
(2)通過圖網絡結構,學習得到各個細粒度特征的加權系數,進一步提高特征的分辨能力。
如圖所示,網絡在學習行人特征提取的同時還要學習區分不同部分的人體結構,有的放矢地在這些區域提取特征并進行池化可以大大減少背景信息造成的干擾。同時使用圖卷積網絡對人體各部分的特征之關系經行建模可以得到一個人的整體表示,其效果要優于直接垂直等分特征圖。
各部分的特征向量首先堆疊在一起形成特征矩陣,使用一維卷積分別混洗每行和每列的特征,讓信息在各部分、各通道之間流動,重復一定次數以后可以得到穩定的整體特征。
3、重構距離:最后在測試階段,除常規距離計算手段,引入重構距離,提升網絡對未對齊、遮擋等技術難點的魯棒性。
為了解決遮擋帶來的精度下降問題,提出線性空間重構,利用參考圖片的信息嘗試盡可能地恢復殘缺特征圖,恢復后的特征圖和參考特征圖之間的距離即為重構距離。由此可以保證相似的圖片之間可以互相重構,而不同個體的圖片不管怎么重構都有一定的距離。從而提高了模型應對遮擋情況的能力。
ReID 算法持續優化,加速技術在多行業應用落地
ReID 算法加速技術在多行業應用落地
近年來受益于深度學習的發展,行人再識別(ReID)技術水平得到了巨大提升,超越人眼識別能力,并達到了商用的水平。作為人臉識別技術的重要補充,其發展內核便是在不同視頻中,在無法獲取清晰人臉特征信息前提下,機器通過穿著、發型、體態等信息將同一個人識別出來,增強數據的時空連接性。在公共安全(如智能視頻監控、安保、刑偵)、智能零售、智能交通以及智慧城市等領域有很高的應用價值。
在公共安全領域,行人再識別技術在警務實戰中可以作為人臉識別技術的有力補充,幫助公安視頻偵查實現人臉、人體圖像與數據聯結,強化軌跡追蹤功能,深化公安視頻圖像應用能力。
在智慧零售領域,行人再識別技術可以幫助商超收集“人”與“場”之間的關系數據并以可視化的方式重現。通過行人再識別技術追蹤記錄顧客店內行動軌跡,分析熱點區域和商品關注度,分析不同區域的客流駐足率,從而據此優化商品陳列,獲取最佳客流動線;感知客流峰谷,最受歡迎區域,合理配備人員,提升服務。同時,也將有助于基于用戶行為畫像,實現線下廣告精準投放。
在智能制造、智慧園區等領域,行人再識別技術同樣可以在提高員工工作效率,管理規范生產過程,降低企業管理成本,提升企業安保等級等方面有很多的應用場景。目前,澎思科技自研的 ReID 算法已經在不同行業的多個業務場景中落地應用。
-
算法
+關注
關注
23文章
4618瀏覽量
93032 -
計算機視覺
+關注
關注
8文章
1698瀏覽量
46027
原文標題:超阿里、大華,澎思科技行人再識別(ReID)技術刷新三大數據集記錄
文章出處:【微信號:rgznai100,微信公眾號:rgznai100】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
評論