1 建設(shè)目標(biāo)及內(nèi)容
1.1 建設(shè)目標(biāo)
為提升機(jī)場智能化程度,同時(shí)杜絕他駕行為,及忘帶證件、證件過期等證件無法使用問題,擬通過出租車人像識別準(zhǔn)入系統(tǒng)實(shí)現(xiàn)出租車人像識別準(zhǔn)入制度。
1.2 建設(shè)內(nèi)容
通過對原有身份證核驗(yàn)系統(tǒng)進(jìn)行改造升級,升級為人臉實(shí)時(shí)比對系統(tǒng),在出租車通道旁架設(shè)現(xiàn)場人車識別終端。出租車司機(jī)需在機(jī)場公安局國門公安APP上進(jìn)行身份認(rèn)證,認(rèn)證通過后即可通過通道旁人車識別終端進(jìn)行人臉、車牌識別,并與在冊的合法出租車司機(jī)人像庫、車輛庫進(jìn)行比對,比對無誤后,進(jìn)而聯(lián)動閘機(jī)抬桿放行;支持對出租車司機(jī)進(jìn)行誠信監(jiān)管,對于存在不誠信經(jīng)營的司機(jī),可將其列入管控名單,限制其入場??蓪?shí)現(xiàn)黑名單布控功能,對布控的司機(jī)、車輛進(jìn)行聲光報(bào)警。
2 總體架構(gòu)
2.1 總體要求
本項(xiàng)目采用雙網(wǎng)多平臺架構(gòu);
系統(tǒng)基于人臉技術(shù)和車牌識別的云計(jì)算架構(gòu);
開放式應(yīng)用接口,支持多系統(tǒng)主動對接和被動對接;
支持人臉識別和人臉特征提取。
2.2 網(wǎng)絡(luò)架構(gòu)
2.3 業(yè)務(wù)流程
本服務(wù)方案滿足司機(jī)身份驗(yàn)證、人車綁定驗(yàn)證等多種通行方式。
車輛進(jìn)入通道后首先進(jìn)行車牌識別,根據(jù)識別的車牌查詢出該車輛綁定司機(jī)信息,前端智能終端采集到的人員身份信息進(jìn)行比對,比對成功后抬桿放行;比對不成功前端聲光報(bào)警并通知工作人員。
車牌識別
本項(xiàng)目運(yùn)用國際先進(jìn)的動態(tài)識別車牌技術(shù),車輛進(jìn)場過程中(無需停車)捕獲車牌并將車牌照片、識別結(jié)果、拍攝時(shí)間等相關(guān)信息提取一并發(fā)送至終端進(jìn)行存儲,方便后期查閱。
人臉抓拍
通過人臉檢測算法,前端智能抓拍機(jī)從實(shí)時(shí)視頻流中自動檢測、跟蹤人臉圖片,通過對人臉進(jìn)行檢測、跟蹤、抓拍、評分、篩選等一系列的流程,結(jié)合人臉質(zhì)量判斷規(guī)則,自動選出符合人臉提取條件的人臉照片抓拍并進(jìn)行輸出。
人臉比對平臺
人臉比對平臺支持1:1及1:N比對,比對時(shí)間<1m
3 總體設(shè)計(jì)
3.1 設(shè)計(jì)思路
靈活性(Flexibility)
有效性(Efficiency)
可靠性(Reliability)
可理解性(Understandability)
維護(hù)性(Maintainability)
重用性(Reuse-ability)
適應(yīng)性(Adaptability)
可移植性(Portability)
可追蹤性(Traceability)
互操作性(Interoperability)
3.2 設(shè)計(jì)原則
1)實(shí)用性
實(shí)現(xiàn)對進(jìn)入航站樓排隊(duì)拉客的出租車的實(shí)時(shí)監(jiān)控,保障所有進(jìn)入航站樓內(nèi)拉客的出租車均為在冊的出租車,杜絕套牌車、無牌車、非在冊司機(jī)駕駛等行為。
2)先進(jìn)性
采用領(lǐng)先的科學(xué)技術(shù)水平,集成了先進(jìn)的車牌識別、人臉識別算法,在保證整個(gè)系統(tǒng)功能和性能的前提下,最大限度地采用成熟、可繼承、具備廣闊發(fā)展前景的先進(jìn)技術(shù)。保證整個(gè)系統(tǒng)功能的科學(xué)合理性。
3)可靠性
出租車準(zhǔn)入系統(tǒng)是處于24小時(shí)工作,系統(tǒng)采用業(yè)內(nèi)主流產(chǎn)品,保證了系統(tǒng)的高穩(wěn)定性、高可靠性。前端智能硬件設(shè)計(jì)上考慮室內(nèi)外工作的特殊性,具有耐高溫、散熱性能好,防雷、防浪涌保護(hù)等多方面安全考慮,為系統(tǒng)的穩(wěn)定運(yùn)行提供保障。
4)可擴(kuò)展性
無論在系統(tǒng)軟件、硬件的設(shè)計(jì)和選型上,都充分考慮其后期的可擴(kuò)展性,結(jié)構(gòu)上應(yīng)易于擴(kuò)充,以便于后期新功能的擴(kuò)充。在硬件的接口上也比較豐富,能適應(yīng)后期更多設(shè)備的接入控制。
5)易操作性
系統(tǒng)具有簡單易學(xué)的操作界面,無需專業(yè)的計(jì)算機(jī)知識,普通用戶即可輕松完成日常人員管控系統(tǒng)的操作。
3.3 關(guān)鍵技術(shù)
3.3.1 車牌識別技術(shù)
系統(tǒng)識別主要由圖像采集和視頻車輛檢測、車牌定位搜索和分割、字符切割、字符特征提取、單字識別等幾個(gè)部分組成。對進(jìn)入通道的車輛車牌快速抓拍捕捉確定位置,根據(jù)車牌顏色,數(shù)字,和字母精準(zhǔn)識別分割,提取信息并儲存到電腦里,方便車輛出場時(shí)調(diào)用時(shí)間信息來計(jì)算費(fèi)用,這樣的算法準(zhǔn)確,高效避免出入口擁堵現(xiàn)象的發(fā)生,高清晰CMOS圖像傳感器,高性能DSP為圖像處理核心,內(nèi)置控制CPU,多項(xiàng)新的技術(shù)可對圖像編碼、處理分析。其基本工作步驟例如以下:
(1)當(dāng)行駛的車輛經(jīng)過時(shí),觸發(fā)攝像的虛擬線圈感應(yīng)區(qū)域,系統(tǒng)被喚醒處于工作狀態(tài);攝像則對視頻圖像進(jìn)行逐幀實(shí)時(shí)處理,對比,篩選過濾選擇最優(yōu)的車輛圖像。
(2)把采集到的最優(yōu)圖片輸入交換給 DSP進(jìn)行處理,圖像處理包含圖像轉(zhuǎn)換、圖像增強(qiáng)、濾波和水平較正等;
(3)由檢索模塊進(jìn)行牌照搜索與檢測,定位并切割出包括牌照字符號碼的矩形區(qū)域;
(4)對牌照字符進(jìn)行二值化并切割出單個(gè)字符,經(jīng)歸一化后輸入字符識別系統(tǒng)進(jìn)行識別。
模糊圖像處理
3.3.2 人臉識別技術(shù)
人臉識別技術(shù)是指利用分析比較的計(jì)算機(jī)技術(shù)識別人臉。人臉識別是一項(xiàng)熱門的計(jì)算機(jī)技術(shù)研究領(lǐng)域,其中包括人臉追蹤偵測,自動調(diào)整影像放大,夜間紅外偵測,自動調(diào)整曝光強(qiáng)度等技術(shù)。
3.4 動態(tài)人臉識別
動態(tài)人臉識別是不限制范圍,你只要出現(xiàn)在范圍內(nèi),無論在哪個(gè)地方,都可以自動識別。也就是說,人以自然的形態(tài)走過去,攝像頭會進(jìn)行信息的抓拍和采集,發(fā)出相應(yīng)的指令,進(jìn)行動態(tài)人臉識別。
相比較靜態(tài)人臉識別,很明顯,動態(tài)人臉識別體驗(yàn)感更好,因?yàn)槭莿討B(tài)的,產(chǎn)品價(jià)格相對較高,用戶容量也比較大。動態(tài)人臉識別識別速度快,20毫秒實(shí)時(shí)識別,每秒10張以上。保存本地電腦,私密性較好。
人臉識別經(jīng)過40年左右的發(fā)展,技術(shù)上已經(jīng)達(dá)到了一定的成熟度。與其他生物特征識別技術(shù)相比,人臉識別在實(shí)用性方面具有獨(dú)到的技術(shù)優(yōu)勢。不管是動態(tài)人臉識別還是靜態(tài)人臉識別,我們都不可忽視其作用性。如今,人臉識別系統(tǒng)應(yīng)用范圍已經(jīng)相當(dāng)廣泛,可用于公安、機(jī)場、銀行、安防、酒店、地鐵等多個(gè)重要行業(yè)及領(lǐng)域,以及智能門禁、門鎖、考勤等民用市場。
3.5 硬件介紹
3.5.1 人臉抓拍機(jī)
采用國內(nèi)先進(jìn)的人臉抓拍技術(shù)支持:人臉檢測、跟蹤、去重、質(zhì)量檢測等。
3.5.1.1 運(yùn)動目標(biāo)檢測在人臉抓拍中的應(yīng)用
運(yùn)動目標(biāo)檢測是圖像處理算法中比較成熟的技術(shù),理論簡單,資源消耗低,根據(jù)“有人臉必有目標(biāo)進(jìn)入”這一原則,首先對圖像序列進(jìn)行運(yùn)動目標(biāo)檢測,再對運(yùn)動區(qū)域進(jìn)行人臉檢測不僅可以大幅提高無人狀態(tài)下的人臉抓拍的性能,還可以濾除特定光照條件下靜止的誤檢人臉?;趩胃咚狗植嫉谋尘敖2罘址椒梢詽M足人臉檢測中運(yùn)動目標(biāo)檢測的需求,首先利用幀間差分處理圖像序列,將檢測到的背景進(jìn)行單高斯背景建模,再用建模背景與圖像序列差分得到前景目標(biāo),進(jìn)而進(jìn)行形態(tài)學(xué)處理,連通域標(biāo)記獲取運(yùn)動區(qū)域,最后求算運(yùn)動區(qū)域最大外接矩形,作為一個(gè)整體進(jìn)行人臉檢測。
當(dāng)人臉靜止時(shí),系統(tǒng)也必須正確地檢出人臉,所以,送入人臉檢測算法的圖像區(qū)域不僅和當(dāng)前幀的運(yùn)動檢測結(jié)果相關(guān),還與上一幀的運(yùn)動情況和人臉檢測結(jié)果相關(guān)。采用的處理流程如表1示,需要特別處理的是,前一幀有人,當(dāng)前幀無運(yùn)動,運(yùn)動檢測結(jié)果修正為上一幀人像區(qū)域,防止有人走動時(shí)突然停止,導(dǎo)致無人像檢出;前一幀有人無運(yùn)動,當(dāng)前幀有運(yùn)動,運(yùn)動檢測結(jié)果修正為上一幀人臉區(qū)域與當(dāng)前幀運(yùn)動區(qū)域的最大外接矩形,防止上一幀靜止的人像被漏檢。
3.5.1.2 人臉位置跟蹤
目前,主流的人臉跟蹤方法包括基于特征匹配的人臉跟蹤方法,基于區(qū)域匹配的人臉跟蹤方法及基于模型匹配的人臉跟蹤方法。基于特征匹配的人臉跟蹤方法利用目標(biāo)物體的個(gè)體特征實(shí)現(xiàn)跟蹤,對個(gè)體特征的依賴大?;趨^(qū)域匹配的人臉跟蹤利用目標(biāo)區(qū)域的紋理或顏色進(jìn)行跟蹤,長時(shí)間跟蹤容易產(chǎn)生誤差積累?;谀P推ヅ涞娜四樃櫡椒▽⒛繕?biāo)抽象為數(shù)學(xué)特征,通過相似度比對實(shí)現(xiàn)跟蹤,對特征的準(zhǔn)確性要求高,也很難達(dá)到實(shí)時(shí)性的要求。
本文采用基于位置的人臉跟蹤方法,該方法對人臉檢測的實(shí)時(shí)性要求較高。當(dāng)相鄰兩幀人臉發(fā)生面積重疊時(shí),即認(rèn)定為同一個(gè)人臉,否則認(rèn)為新的人臉,該方法原理簡單,容易實(shí)現(xiàn),除不能處理人臉交叉場景外,可以滿足絕大部分場景下人臉的跟蹤需求。
3.5.2 身份證識別器
本項(xiàng)目使用RFID識別技術(shù)可提取身份證中姓名、性別、民族、出生年月、居住地、照片等多種信息。二代身份證融入了ic卡技術(shù),采用智能卡技術(shù),內(nèi)含rfid芯片,芯片無法復(fù)制,高防偽性能、辦件時(shí)間縮短、儲存信息增多。并且芯片使用特定的邏輯加密算法,有利于證件執(zhí)法、使用中的安全管理,增強(qiáng)防偽功能,芯片和電路線圈在卡內(nèi)封裝,能夠保證證件在各種環(huán)境中正常使用,壽命增長,并且融入的rfid技術(shù),讀寫速度增快、使用方便,易于保管,方便各用證部門使用計(jì)算機(jī)核查,存儲容量大,寫入的信息可以劃分安全等級,分區(qū)儲存。
3.5.3 車牌識別
|
我們選用的車牌識別系統(tǒng) |
市面上大部分車牌識別系統(tǒng) |
識別方式 |
視頻寬動態(tài)車牌檢測
(在檢測到完整車牌后,再保存照片識別) |
連續(xù)拍照檢測
(定點(diǎn)連續(xù)拍照,有可能會由于跟車阻擋了車牌而導(dǎo)致所拍照片沒有完整車牌號) |
識別算法 |
與國內(nèi)國外幾十家車牌識別算法現(xiàn)場測試驗(yàn)證和比較,最終篩選出最優(yōu)勢的算法,該算法識別別率高(識別率99.7%),角度大(35度),識別范圍廣(大陸民軍警車牌,港澳臺車牌等),識別速度快(小于50ms) |
大多是采用車牌識別算法廠家的自薦產(chǎn)品,未作大量的實(shí)驗(yàn)比較和現(xiàn)場驗(yàn)證,很多實(shí)驗(yàn)性、僅僅能用的算法在作為產(chǎn)品在使用。穩(wěn)定性、識別率上特別是在惡劣使用環(huán)境下無法保證。 |
抗干擾能力 |
對燈光、氣候等環(huán)境條件依賴性低
(隨車輛移動變化,光照的變化,在視頻中總會選擇到較清晰的拍攝效果,大大提高了車牌號識別成功率) |
對燈光、氣候等環(huán)境條件依賴性高
(連續(xù)拍照時(shí)曝光過多或不足會影響到拍照的效果,導(dǎo)致識別車牌號失?。?/span> |
無牌或污穢牌 |
系統(tǒng)軟件及時(shí)報(bào)警,按設(shè)置的方式自動處理或人工處理,保證不會堵塞通道 |
在未識別到車牌的情況下系統(tǒng)不能進(jìn)行任何提示,需要人工時(shí)時(shí)盯著,往往因?yàn)闊o法及時(shí)處理而堵塞通道 |
無人值守連續(xù)跟車處理 |
逐幀實(shí)時(shí)處理技術(shù),解決連續(xù)跟車時(shí)后跟車輛時(shí)不時(shí)關(guān)住不能通過的問題,保證連續(xù)跟車順利通行 |
暫無好的解決辦法 |
安裝方式 |
軟件設(shè)置虛擬線圈感應(yīng)范圍調(diào)試方便,攝像機(jī)顯示屏一體式安裝快捷 |
采用地感觸發(fā)方式,如尺寸出現(xiàn)偏差,調(diào)整麻煩;
攝像機(jī)與顯示屏分離式安裝,需要另外立樁,增加施工工時(shí)。 |
3.6 軟件方案
3.6.1 人臉識別平臺
平臺向比對設(shè)備下發(fā)需要進(jìn)行人臉比對的人員信息到名單庫中,比對設(shè)備接收人員信息后與綁定的前端IPC抓拍的人臉進(jìn)行比對,將相似度閾值(平臺下發(fā))之上的比對結(jié)果和信息發(fā)送給平臺,完成比對。其中:
相似度閾值范圍:由平臺下發(fā),可根據(jù)用戶需要進(jìn)行設(shè)置不同的閾值,一般人臉比對閾值為80%~90%,閾值太高可能導(dǎo)致比對無結(jié)果,遺漏重要信息;閾值太低導(dǎo)致比對結(jié)果過多,需要人工去二次確認(rèn)、造成效率低下。
1、 人臉身份核驗(yàn)
由具備人臉身份核驗(yàn)管理權(quán)限的用戶進(jìn)行人臉身份核驗(yàn)設(shè)置,將需要核驗(yàn)的人臉下發(fā)到名單庫,并將名單庫與指定的比對設(shè)備(具備比對功能的前端攝像機(jī)/后端比對設(shè)備/服務(wù)器比對)進(jìn)行關(guān)聯(lián)核驗(yàn)。關(guān)聯(lián)后,攝像機(jī)抓拍的人臉只與其關(guān)聯(lián)的名單庫內(nèi)人臉進(jìn)行比對識別和聯(lián)動。
人臉比對設(shè)備將推送過來的人臉照片進(jìn)行建模,并和關(guān)聯(lián)的人臉庫內(nèi)的人臉圖片進(jìn)行比對,如果比對結(jié)果中有1個(gè)或多個(gè)相似度達(dá)到或超過預(yù)設(shè)報(bào)警閾值,選取相似度最高的人臉圖片作為識別結(jié)果(不同的模式上報(bào)的不同張數(shù)),并將識別的人臉圖片和比對結(jié)果推送到平臺,在平臺中人臉比對事件進(jìn)行查詢報(bào)警信息和比對結(jié)果。
2、 人臉庫管理
1)名單庫添加
平臺支持創(chuàng)建、編輯、刪除名單庫,可根據(jù)不同的需要,系統(tǒng)可創(chuàng)建多個(gè)不同的名單庫,可便于用戶根據(jù)自身需求將不同的名單庫用作不同的比對功能,如名單庫可設(shè)置白名單庫、黑名單庫等。
人員名單庫分組管理
2)名單庫人員添加。
平臺可向各名單庫添加、編輯、刪除人員信息和人臉圖片,進(jìn)行人員信息和人臉圖片的信息注冊,系統(tǒng)自動完成人臉特征提取及建模,一個(gè)人員可對應(yīng)多張人臉圖片。
名單庫人員添加
3)名單庫人員添加的方式
平臺支持手動添加人臉庫和批量人臉添加、刪除處理,如平臺可以單個(gè)圖片進(jìn)行注冊,手動輸入人員的身份信息;平臺支持批量導(dǎo)入人員,其中的人員姓名直接使用其照片名稱,便于當(dāng)名單庫人員較多時(shí)的快速導(dǎo)入。
名單庫人員快速導(dǎo)入
4)抓拍庫獨(dú)立管理
平臺對不同人臉識別設(shè)備的抓拍庫不做統(tǒng)一管理。其中,前端比對功能的抓拍照片存儲在前端攝像機(jī)中,NVR接入的抓拍庫圖片存儲在NVR中,臉譜接入的抓拍庫圖片存儲在云存儲中。
為避免漏報(bào)過多,對抓拍的人臉照片質(zhì)量有一定要求,需要按照攝像機(jī)最佳效果進(jìn)行安裝,避免抓拍機(jī)架設(shè)太高,鏡頭未拉近,覆蓋范圍太廣,人臉像素過小等抓拍質(zhì)量問題。
5)比對事件統(tǒng)一管理
平臺對不同人臉識別設(shè)備的比對事件、比對詳情進(jìn)行統(tǒng)一存儲和管理。用戶可對事件進(jìn)行查看以及操作各類聯(lián)動,以便用戶查詢及生成報(bào)表。
3.6.2 App申請功能
本項(xiàng)目提供H5頁面申請功能,支持第三方App嵌入,支持多種移動端系統(tǒng)及版本包含安卓和IOS。