背景

在公(gōng)安(ān)信息化建設深入開展的背景下，現有(yǒu)視頻監控系統存在着缺乏深度應用(yòng)的問題，其應用(yòng)瓶頸在于如何高效提取有(yǒu)效視頻信息，實現信息關聯和自定義檢索功能(néng)。解決這一問題的核心是圖像結構化技(jì )術。用(yòng)圖像結構化技(jì )術提升公(gōng)安(ān)在視頻偵查和破案方面的效能(néng)，使之成為(wèi)新(xīn)一代的智慧化、語義化、情報化的視頻處理(lǐ)工(gōng)具(jù)系統。針對泛卡口的視頻實時結構化、大數據應用(yòng)是未來平安(ān)城市建設的一個重要方向。

 圖像結構化建設現狀

 相關技(jì )術介紹

• 車(chē)輛特征二次識别技(jì )術——基于“深度學(xué)習”的車(chē)輛特征識别技(jì )術，支持車(chē)型，車(chē)款，車(chē)身顔色識别，以及車(chē)牌識别；可(kě)檢測年檢标、遮陽闆、紙巾盒、挂件、擺件、安(ān)全帶等。

• 圖像結構化技(jì )術——一種視頻内容信息提取技(jì )術，它對視頻内容按照語義關系以時空分(fēn)割、特征提取、對象識别等方式處理(lǐ)，從而組織成可(kě)供計算機和人理(lǐ)解的文(wén)本信息的技(jì )術。

 

方案概述

英飛拓圖像結構化智能(néng)檢索平台采用(yòng)以“深度學(xué)習”為(wèi)核心的圖像識别技(jì )術，能(néng)夠實時對攝像機的視頻流和圖片進行特征判斷，并能(néng)提取攝像機錄像文(wén)件中(zhōng)的人、車(chē)、非機動車(chē)信息，對海量視頻數據經過結構化引擎處理(lǐ)，基于雲存儲技(jì )術構建大數據平台，基于數據挖掘技(jì )術構建應用(yòng)平台，實現視頻圖片的智能(néng)檢索、數據應用(yòng)等功能(néng)。

平台采用(yòng)分(fēn)布式架構，以視頻監控為(wèi)中(zhōng)心，通過橫向擴展、縱向級聯獲取視頻圖像，實現行人特征二次識别、車(chē)輛特征二次識别及圖像結構化分(fēn)析等功能(néng)。同時，平台可(kě)與GIS系統對接，實現車(chē)輛軌迹分(fēn)析、頻繁過車(chē)分(fēn)析等功能(néng)。

 

方案拓撲圖

英飛拓圖像結構化智能(néng)檢索平台集成了6大功能(néng)

• 實時監控

• 錄像分(fēn)析

• 人車(chē)二次識别

• 人車(chē)綜合檢索

• 數據統計分(fēn)析

• 電(diàn)子地圖對接

 

系統圖

 

方案特點

• 采用(yòng)深度學(xué)習方式，車(chē)輛識别率達到95%，行人識别率達到95%

• 離線(xiàn)與實時錄像結構化分(fēn)析

• 目标特征檢索，以圖搜圖功能(néng)

• 檢索數據統計分(fēn)析功能(néng)

• 車(chē)輛軌迹查詢，行車(chē)規律分(fēn)析

車(chē)輛識别

• 識别13種車(chē)牌

系統按照GA36-2014标準進行設計，支持多(duō)達13種類型車(chē)牌的号碼識别，包括：小(xiǎo)型汽車(chē)号牌、大型汽車(chē)号牌、挂車(chē)号牌、使館汽車(chē)号牌、領館汽車(chē)号牌、香港入出境車(chē)号牌、澳門入出境車(chē)号牌、教練汽車(chē)号牌、警用(yòng)汽車(chē)号牌、低速車(chē)号牌、臨時行駛車(chē)号牌、臨時入境汽車(chē)号牌、拖拉機号牌。

 

• 識别13種車(chē)身顔色

黑、白、藍、黃、橙、綠、紅、紫 、灰、青、棕、銀、粉

 

• 識别21種車(chē)型

支持的車(chē)型：轎車(chē)、越野車(chē)、商(shāng)務(wù)車(chē)、小(xiǎo)型貨車(chē)、大型貨車(chē)、輕客、小(xiǎo)型客車(chē)、大型客車(chē)、三輪車(chē)、微面、皮卡、挂車(chē)、混泥土攪拌車(chē)、罐車(chē)、随車(chē)吊、消防車(chē)、渣土車(chē)、押運車(chē)、工(gōng)程搶修車(chē)、救援車(chē)、欄闆卡車(chē)等。

 

• 識别5500多(duō)種車(chē)款

系統支持車(chē)輛三級品牌（品牌、車(chē)系和款型）識别，包括200種以上的車(chē)輛品牌識别。在識别車(chē)輛品牌的基礎上，支持近千種車(chē)輛系列的識别，支持子型号數量大于5500個，達到國(guó)内領先水平。

• 特有(yǒu)的安(ān)全帶、打電(diàn)話、危化品車(chē)輛、行李架、天窗、備胎識别能(néng)力

系統支持對安(ān)全帶、打電(diàn)話、危化品車(chē)輛、行李架、天窗和備胎的識别檢測

 人臉識别

• 識别16種行人特征

支持識别行人年齡、性别、上衣顔色、上衣款式、上衣紋理(lǐ)、下衣顔色、下衣款式、發型、眼鏡、帽子、朝向、口罩、背包、是否拎東西、是否拉杆箱、是否使用(yòng)手推車(chē)等16種結構化特征信息。

 方案功能(néng)

實時監控

系統實時抓拍視頻源内的機動車(chē)、非機動車(chē)、行人圖片，實時展示結構化分(fēn)析結果

 錄像分(fēn)析

支持對用(yòng)戶上傳的離線(xiàn)錄像進行分(fēn)析。

 綜合檢索

支持行人、機動車(chē)、非機動車(chē)結構特征智能(néng)檢索。通過提交目标的部分(fēn)結構化特征信息，系統能(néng)通過相關的特征信息将目标定位到一定範圍。

 以圖搜圖

支持自定義上傳行人、人騎車(chē)、車(chē)輛、人臉圖片，并基于上傳圖像内目标的全面或局部特征對目标進行有(yǒu)效檢索，在短時間内鎖定其行蹤。

 統計分(fēn)析

支持對日/周/月/年的檢索數據進行統計分(fēn)析。

 電(diàn)子地圖

通過電(diàn)子地圖實現監控點調看、設置、報警聯動等，支持頻繁過車(chē)分(fēn)析，行車(chē)規律分(fēn)析，行人和車(chē)輛的軌迹顯示，并通過方向、速度、經過時間綜合計算，生成軌迹存入軌迹庫，對軌迹進行管理(lǐ)。