人口信息人像比對系統關鍵性能指標評測方法技術方案

本發明專利技術公開一種人口信息人像比對系統關鍵性能指標評測方法，定義抽取人像比對數據的參數；根據定義的參數從部級人口庫中抽取第一數量的人口數據組成探測庫；根據定義的參數從部級人口庫中抽取第二數量的人口數據組成測試庫，并從測試庫中刪除存在的探測庫中的照片，將探測庫中的照片及非人像照片分區存入測試庫；對所要評測的不同單位的人像比對算法及引擎分別進行調試和建模，并保存建模開始時間、建模結束時間及建模階段產生的建模指標值；對建模后的不同單位的人像比對算法及引擎分別進行人像比對，并記錄比對開始時間、比對結束時間及比對階段產生的比對指標值；對不同單位的人像比對算法及引擎的評測結果進行統計和評分，并生成評測報告。

Evaluation method of key performance index for portrait matching system of population information

Key performance indexes of the invention discloses a population information portrait comparison system evaluation method, parameter definition extraction portrait comparison data; according to the definition of the population parameters to extract the data from the library in the first number of ministerial level population composition detection library; component test library population data extraction second number from the ministerial level population Library according to the definition of the parameter, and delete detection of Library in presence of photos from the test library, the library in the photo detection and non portrait partition in test base; portrait matching algorithm and engine of different units to evaluate respectively the test and modeling, modeling index and save the start time, end time modeling modeling and modeling stage value portrait; matching algorithm and engine of different units after modeling respectively portrait comparison, and record the start time, end time comparison And compare the index value produced by the comparison stage, compare and compare the image matching algorithm of different units and the results of engine evaluation, and generate the evaluation report.

【技術實現步驟摘要】
人口信息人像比對系統關鍵性能指標評測方法
本專利技術涉及人口管理領域，具體而言，涉及一種人口信息人像比對系統關鍵性能指標評測方法。
技術介紹
為解決虛假身份、多重戶口、一人多證、漂白身份等歷史遺留問題，公安部部級人口信息人像比對系統將建立超12億人口規模的人像比對引擎，為公正客觀地評價人像比對算法及引擎的可行性和關鍵技術性能指標，必須建立一套標準的、完整的評測指標體系和相應的評測系統，現行的人像比對評測方法不能滿足大規模查重比對優化的業務需求。通過公安部部級人口信息管理系統高效提取評測數據，建立面向大規模查重比對優化的人像比對技術評測指標體系及評測系統，并利用其對比對算法及引擎進行評測，為各比對算法及引擎在實際業務中的應用提供指標依據，為公安部部級人口信息人像比對系統項目的算法選型提供檢測平臺，為地方人像比對系統的算法選型、升級改造提供技術標準。
技術實現思路
本專利技術提供一種人口信息人像比對系統關鍵性能指標評測方法，用以克服現有技術中存在的至少一個問題。為達到上述目的，本專利技術提供了一種人口信息人像比對系統關鍵性能指標評測方法，包括以下步驟：定義抽取人像比對數據的參數；根據定義的參數從部級人口庫中抽取第一數量的人口數據組成探測庫，其中所抽取的每條人口數據包含間隔設定時間的兩張人像照片；根據定義的參數從部級人口庫中抽取第二數量的人口數據組成測試庫，并從測試庫中刪除存在的探測庫中的照片，將探測庫中的照片及非人像照片分區存入測試庫；對所要評測的不同單位的人像比對算法及引擎分別進行調試和建模，并保存建模開始時間、建模結束時間及建模階段產生的建模指標值；對建模后的不同單位的人像比對算法及引擎分別進行模板比對，并記錄比對開始時間、比對結束時間及比對階段產生的比對指標值；對不同單位的人像比對算法及引擎的評測結果進行統計和評分，并生成評測報告。進一步地，每條人口數據包含兩張人像照片的間隔設定時間為5年以上。進一步地，所述第一數量為20萬，所述第二數量為1億。進一步地，如果在建模過程中出現異常，則記錄異常問題及異常時間，并進行建模重置。進一步地，如果在比對過程中出現異常，則記錄異常問題及異常時間，并進行比對重置或建模重置。附圖說明為了更清楚地說明本專利技術實施例或現有技術中的技術方案，下面將對實施例或現有技術描述中所需要使用的附圖作簡單地介紹，顯而易見地，下面描述中的附圖僅僅是本專利技術的一些實施例，對于本領域普通技術人員來講，在不付出創造性勞動的前提下，還可以根據這些附圖獲得其他的附圖。圖1為本專利技術一個實施例的人口信息人像比對系統關鍵性能指標評測方法中的數據抽取流程圖；圖2為本專利技術一個實施例的人口信息人像比對系統關鍵性能指標評測方法中的算法評測流程圖。具體實施方式下面將結合本專利技術實施例中的附圖，對本專利技術實施例中的技術方案進行清楚、完整地描述，顯然，所描述的實施例僅僅是本專利技術一部分實施例，而不是全部的實施例。基于本專利技術中的實施例，本領域普通技術人員在沒有付出創造性勞動前提下所獲得的所有其他實施例，都屬于本專利技術保護的范圍。圖1為本專利技術一個實施例的人口信息人像比對系統關鍵性能指標評測方法中的數據抽取流程圖；圖2為本專利技術一個實施例的人口信息人像比對系統關鍵性能指標評測方法中的算法評測流程圖。以下結合附圖對本專利技術進行詳細說明。人口信息人像比對系統關鍵性能指標評測方法集JavaEE技術之所長，采用B/S構架的軟件體系架構。系統以人像識別系列標準為參照，以人像比對算法及引擎關鍵技術性能指標建設為核心，評測指標、指標權重、指標計算及評分公式經過實際測試、結合標準、經過專家評審討論給出。充分考慮系統安全性、可靠性，構建高效、靈活、易擴展的人像比對評測平臺，實現了評測數據抽取、評測指標方案自定義、建模及比對階段指標計算、建模及比對階段指標系統評分、評測結果分析等核心功能。本方法主要分為數據抽取、評測指標定義、人像比對算法及引擎評測、結果計算處理，包括數據庫接口授權、人像建模、模板比對、數據處理四部分，數據庫接口授權為控制受測單位在評測過程中對數據庫的訪問權限，通過人為或接口獲得數據庫連接，以記錄受測單位準確的建模開始及結束時間、比對開始及結束時間，建模時間與比對時間是衡量人像比對算法及引擎主要性能的關鍵指標。人像建模包括人像照片及非人像照片建模，為了衡量人像比對算法及引擎真實的照片建模成功率。模板比對包括模板讀取加載內存及完成模板比對時間，主要驗證人像比對算法及引擎在大規模數據下的比對策略及比對準確率。數據處理在模板數據、比對結果數據下計算各項指標值、對應的指標評分，為人像比對算法及引擎的指標優劣提供分析、選型依據。評測數據符合實際業務場景，能夠真實反應評測指標的關鍵技術性能，評測數據抽取通過公安部部級人口信息管理系統獲取，受測的人像比對算法及引擎主要應用于公安部部級人口信息管理系統的戶籍查重清理業務，評測數據按照性別、年齡、民族等條件參數抽取，具有代表性，能夠為人像比對算法及引擎的選型提供有力依據。人像算法及引擎的評測在統一的評測環境上、同樣的評測數據進行，保證了受測單位的公平公正，評測流程以評測登記開始，創建評測數據庫用戶，人像建模、人像比對、結果存儲到環境重置為循環，在規定的評測周期內完成評測，逾期自動結束評測。大規模評測數據：通過公安部部級人口信息管理系統12億人口規模的數據中抽取1億測試庫數據、20萬探測庫數據，組成評測比對數據，將完成20萬對1億的交叉比對，總計20萬億的比對次數。評測數據將按年齡、性別、民族等條件通過比例參數抽取并平均分配到測試數據庫服務器上，探測庫數據要求照片時間間隔5年以上，抽取的數據經過人像比對多次篩選按照相似度區間進行分類，滿足數據規模的同時符合數據質量要求，以驗證人像比對算法的性能、準確性等關鍵技術指標。數據抽取流程：評測數據分六步進行數據抽取，第一步數據統計，統計公安部部級人口信息管理系統各個條件比例下的實際值，根據實際值調整條件參數比例；第二步抽取測試庫數據，按照條件參數比例進行抽取；第三步抽取探測庫數據，按照條件參數比例進行抽取；第四步處理探測庫數據，經過多次人像比對算法進行比對，去除重復及不合規數據；第五步清理測試庫數據，插入探測庫數據，根據公民身份號碼+姓名關聯清除相同數據。第六步數據統計，統計抽取后的測試庫及探測庫條件參數下的實際值。算法評測流程：評測中心可分六步進行算法評測，第一步初始化評測環境及評測數據，提供統一的評測設備及規定的評測周期；第二步評測受理，登記受測單位信息及評測算法信息；第三步受測單位準備評測軟件環境部署調試，創建數據庫環境；第四步受測單位開始評測，由評測單位記錄評測開始時間、建模開始結束時間、比對開始結束時間，受測單位按照標準調用接口、存儲數據；第五步評測中心另存備份受測單位數據記錄，重置評測環境，進入下一步，評測串行進行；第六步評測中心待所有算法評測完成后，統計計算評測結果，并對結果進行分析評分，出評測報告。本專利技術一個實施例的人口信息人像比對系統關鍵性能指標評測方法包括以下步驟：定義抽取人像比對數據的參數；根據定義的參數從部級人口庫中抽取第一數量的人口數據組成探測庫，其中所抽取的每條人口數據包含間隔設定時間的兩張人像照片；根據定義的參數從部級本文檔來自技高網...

【技術保護點】
人口信息人像比對系統關鍵性能指標評測方法，其特征在于，包括以下步驟：定義抽取人像比對數據的參數；根據定義的參數從部級人口庫中抽取第一數量的人口數據組成探測庫，其中所抽取的每條人口數據包含間隔設定時間的兩張人像照片；根據定義的參數從部級人口庫中抽取第二數量的人口數據組成測試庫，并從測試庫中刪除存在的探測庫中的照片，將探測庫中的照片及非人像照片分區存入測試庫；對所要評測的不同單位的人像比對算法及引擎分別進行調試和建模，并保存建模開始時間、建模結束時間及建模階段產生的建模指標值；對建模后的不同單位的人像比對算法及引擎分別進行模板比對，并記錄比對開始時間、比對結束時間及比對階段產生的比對指標值；對不同單位的人像比對算法及引擎的評測結果進行統計和評分，并生成評測報告。

【技術特征摘要】
1.人口信息人像比對系統關鍵性能指標評測方法，其特征在于，包括以下步驟：定義抽取人像比對數據的參數；根據定義的參數從部級人口庫中抽取第一數量的人口數據組成探測庫，其中所抽取的每條人口數據包含間隔設定時間的兩張人像照片；根據定義的參數從部級人口庫中抽取第二數量的人口數據組成測試庫，并從測試庫中刪除存在的探測庫中的照片，將探測庫中的照片及非人像照片分區存入測試庫；對所要評測的不同單位的人像比對算法及引擎分別進行調試和建模，并保存建模開始時間、建模結束時間及建模階段產生的建模指標值；對建模后的不同單位的人像比對算法及引擎分別進行模板比對，并記錄比對開始時間、比對結束時間及比對階段產生的比對指標值；對不同單位的人...

【專利技術屬性】
技術研發人員：唐玉建，湯滔，郝瑞朝，陳潔，張照星，魏靜，李銀波，鄒繼文，陶勇，范英，孟祥翠，喬曉光，楊川川，井偉峰，
申請(專利權)人：公安部戶政管理研究中心，航天信息股份有限公司，
類型：發明
國別省市：北京,11