一種人口數(shù)據(jù)查重方法和裝置制造方法
【專利摘要】本發(fā)明公開(kāi)一種人口數(shù)據(jù)查重方法和裝置，其中方法包括：對(duì)多個(gè)人口數(shù)據(jù)庫(kù)進(jìn)行數(shù)據(jù)變更監(jiān)控，將發(fā)生變更的數(shù)據(jù)同步到每個(gè)人口數(shù)據(jù)庫(kù)對(duì)應(yīng)的人像分庫(kù)中，對(duì)發(fā)生變更的數(shù)據(jù)進(jìn)行標(biāo)記；對(duì)每個(gè)人像分庫(kù)中有變更標(biāo)記的數(shù)據(jù)進(jìn)行匯總，將匯總后的數(shù)據(jù)平均分配到多個(gè)更新終端中并行建模，得到每個(gè)發(fā)生變更人員對(duì)應(yīng)的模板數(shù)據(jù)，將發(fā)生變更的模板數(shù)據(jù)新增或替換到對(duì)應(yīng)的特征分庫(kù)中，對(duì)發(fā)生變更的模板數(shù)據(jù)進(jìn)行標(biāo)記；對(duì)每個(gè)特征分庫(kù)中有變更標(biāo)記的模板數(shù)據(jù)進(jìn)行匯總，將匯總后的模板數(shù)據(jù)平均分配到多個(gè)比對(duì)終端中并行查重比對(duì)，將比對(duì)結(jié)果導(dǎo)入更新比對(duì)結(jié)果庫(kù)；接受用戶對(duì)比對(duì)結(jié)果庫(kù)中比對(duì)結(jié)果的查詢、驗(yàn)證、下發(fā)處理、統(tǒng)計(jì)中的至少一項(xiàng)操作處理。
【專利說(shuō)明】一種人口數(shù)據(jù)查重方法和裝置

【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及人口管理領(lǐng)域，具體而言，涉及一種人口數(shù)據(jù)查重方法和裝置。

【背景技術(shù)】
[0002]人口管理是我國(guó)社會(huì)管理的基礎(chǔ)，公民身份的唯一性、準(zhǔn)確性、權(quán)威性涉及國(guó)家各層面的安全。由于歷史原因，各地人口管理工作中存在的數(shù)據(jù)問(wèn)題較多，盡管公安部開(kāi)展了多次全國(guó)性的重號(hào)清理等戶籍整頓工作，但由于缺乏有效的手段，深層次問(wèn)題如冒領(lǐng)、騙領(lǐng)、重復(fù)辦證等問(wèn)題難以及時(shí)發(fā)現(xiàn)。一些不法分子利用這些管理上的漏洞，編造虛假身份信息從事不法行為或通過(guò)假冒信息躲避法律制裁，嚴(yán)重干擾了法律秩序，威脅著公眾安全。根據(jù)各地實(shí)際應(yīng)用經(jīng)驗(yàn)，人像識(shí)別技術(shù)應(yīng)用于以二代證照片為基礎(chǔ)人像源的查重比對(duì)，可以有效遏制冒用身份犯罪，具有很高的安全性與廣泛的適用性，能夠發(fā)揮巨大的實(shí)戰(zhàn)效果。2011年5月，公安部開(kāi)展全國(guó)范圍的“清網(wǎng)行動(dòng)”以來(lái)，人像識(shí)別技術(shù)逐漸成為公安部及各地公安機(jī)關(guān)逃犯抓捕、案件偵破的利器。
[0003]人像識(shí)別技術(shù)，也叫人臉識(shí)別技術(shù)，是一種利用分析比較人臉視覺(jué)特征信息進(jìn)行身份鑒別的生物特征識(shí)別技術(shù)。該技術(shù)具有特征數(shù)據(jù)量小、識(shí)別速度快、識(shí)別準(zhǔn)確率高、拒識(shí)率低、甄別簡(jiǎn)便、使用條件簡(jiǎn)單等特點(diǎn)，是一種靈活、簡(jiǎn)便、易于被人接受的非侵犯性身份識(shí)別方法，在當(dāng)前社會(huì)公共安全防范、逃犯追捕、金融安全、網(wǎng)絡(luò)安全等諸多領(lǐng)域發(fā)揮著重要的作用，被廣泛應(yīng)用于公安、交通、海關(guān)、銀行、計(jì)算機(jī)網(wǎng)絡(luò)，產(chǎn)生了巨大的社會(huì)管理效應(yīng)，對(duì)于維護(hù)國(guó)家安全和社會(huì)穩(wěn)定、打擊各類犯罪活動(dòng)具有十分重大的意義。


【發(fā)明內(nèi)容】

[0004]本發(fā)明提供一種人口數(shù)據(jù)查重方法和裝置，用以提高人員核驗(yàn)的效率。
[0005]為達(dá)到上述目的，本發(fā)明提供了一種人口數(shù)據(jù)查重方法，包括以下步驟:
[0006]對(duì)多個(gè)不同的人口數(shù)據(jù)庫(kù)進(jìn)行數(shù)據(jù)變更監(jiān)控，通過(guò)實(shí)時(shí)或定時(shí)機(jī)制將發(fā)生變更的數(shù)據(jù)同步到每個(gè)人口數(shù)據(jù)庫(kù)對(duì)應(yīng)的人像分庫(kù)中，并對(duì)發(fā)生變更的數(shù)據(jù)進(jìn)行標(biāo)記；
[0007]對(duì)每個(gè)人像分庫(kù)中有變更標(biāo)記的數(shù)據(jù)進(jìn)行匯總，將匯總后的數(shù)據(jù)平均分配到多個(gè)更新終端中并行建模，得到每個(gè)發(fā)生變更人員對(duì)應(yīng)的模板數(shù)據(jù)，并將發(fā)生變更的模板數(shù)據(jù)新增或替換到對(duì)應(yīng)的各個(gè)特征分庫(kù)中，同時(shí)對(duì)發(fā)生變更的模板數(shù)據(jù)進(jìn)行標(biāo)記；
[0008]對(duì)每個(gè)特征分庫(kù)中有變更標(biāo)記的模板數(shù)據(jù)進(jìn)行匯總，將匯總后的模板數(shù)據(jù)平均分配到多個(gè)比對(duì)終端中并行查重比對(duì)，并將比對(duì)結(jié)果導(dǎo)入更新比對(duì)結(jié)果庫(kù)；
[0009]接受用戶對(duì)所述比對(duì)結(jié)果庫(kù)中比對(duì)結(jié)果的查詢、驗(yàn)證、下發(fā)處理、統(tǒng)計(jì)中的至少一項(xiàng)操作處理。
[0010]可選的，當(dāng)并行查重比對(duì)的比對(duì)終端的數(shù)目為偶數(shù)個(gè)時(shí)，將匯總后的模板數(shù)據(jù)平均分配到多個(gè)比對(duì)終端中并行查重比對(duì)包括:
[0011]將待比對(duì)人員的模板數(shù)據(jù)根據(jù)比對(duì)終端的臺(tái)數(shù)平均分組，每組數(shù)據(jù)對(duì)應(yīng)一臺(tái)比對(duì)終端，假設(shè)每組數(shù)據(jù)的平均模板數(shù)為N，參與比對(duì)的更新終端數(shù)為X，其中N為自然數(shù)，X為偶數(shù)；
[0012]將每組數(shù)據(jù)按照公式N+XXN+2分配到每臺(tái)比對(duì)終端上，并按照上、下兩部分進(jìn)行存儲(chǔ)，其中上部分?jǐn)?shù)據(jù)按照公式N+X進(jìn)行存儲(chǔ)，下部分?jǐn)?shù)據(jù)按照公式N~i~XX (X~i~2_l) +N~?~Χ~?~2 進(jìn)打存儲(chǔ)；
[0013]將上、下兩部分?jǐn)?shù)據(jù)根據(jù)該比對(duì)終端的CPU內(nèi)核數(shù)平均分組，按照設(shè)定條件進(jìn)行設(shè)定特征的相互比對(duì)，在對(duì)比時(shí)首先將上、下部分?jǐn)?shù)據(jù)按照公式NX (N - 1)+2進(jìn)行組內(nèi)比對(duì)，然后進(jìn)行各組間模板數(shù)據(jù)的交叉比對(duì)，其中所述設(shè)定條件包括相似度和返回結(jié)果數(shù)。
[0014]可選的，在多機(jī)大數(shù)據(jù)量查重比對(duì)時(shí)，將匯總后的模板數(shù)據(jù)平均分配到多個(gè)比對(duì)終端中并行查重比對(duì)包括:
[0015]將入庫(kù)人員的模板數(shù)據(jù)按年齡、性別、地區(qū)中的至少一項(xiàng)平均分配到偶數(shù)臺(tái)比對(duì)終端上，以多層嵌套的方式存儲(chǔ)在各個(gè)比對(duì)終端中，按設(shè)定條件對(duì)入庫(kù)人員模版數(shù)據(jù)中的設(shè)定特征進(jìn)行單機(jī)相互比對(duì)，所述設(shè)定條件包括相似度和返回結(jié)果數(shù)；
[0016]通過(guò)X + 2公式計(jì)算出每臺(tái)比對(duì)終端與其它比對(duì)終端進(jìn)行比對(duì)的臺(tái)數(shù)，在單機(jī)比對(duì)完后再與所計(jì)算出的其它比對(duì)終端進(jìn)行交叉比對(duì)，其中X代表比對(duì)終端的臺(tái)數(shù)，X為偶數(shù)。
[0017]可選的，所述設(shè)定特征為人像特征數(shù)據(jù)或身份證號(hào)。
[0018]可選的，上述人口數(shù)據(jù)清理比對(duì)方法還包括以下步驟:
[0019]在核查比對(duì)時(shí)，獲取所要核驗(yàn)人員的圖像，從中提取對(duì)應(yīng)的人像特征數(shù)據(jù)，根據(jù)所要核驗(yàn)人員的信息和人像特征數(shù)據(jù)建立所要核驗(yàn)人員的模板數(shù)據(jù)，其中所要核驗(yàn)人員的信息包括年齡、性別、地區(qū)中的至少一項(xiàng)；
[0020]根據(jù)所要核驗(yàn)人員的信息設(shè)定比對(duì)條件，比對(duì)條件包括相似度和返回結(jié)果數(shù)；
[0021]根據(jù)比對(duì)條件將所要核驗(yàn)人員對(duì)應(yīng)的人像特征數(shù)據(jù)在目標(biāo)人口庫(kù)中進(jìn)行比對(duì)，并將比對(duì)結(jié)果展示給用戶。
[0022]為達(dá)到上述目的，本發(fā)明還提供了一種人口數(shù)據(jù)查重裝置，包括:
[0023]監(jiān)控模塊，用于對(duì)多個(gè)不同的人口數(shù)據(jù)庫(kù)進(jìn)行數(shù)據(jù)變更監(jiān)控，通過(guò)實(shí)時(shí)或定時(shí)機(jī)制將發(fā)生變更的數(shù)據(jù)同步到每個(gè)人口數(shù)據(jù)庫(kù)對(duì)應(yīng)的人像分庫(kù)中，并對(duì)發(fā)生變更的數(shù)據(jù)進(jìn)行標(biāo)記；
[0024]建模模塊，用于對(duì)每個(gè)人像分庫(kù)中有變更標(biāo)記的數(shù)據(jù)進(jìn)行匯總，將匯總后的數(shù)據(jù)平均分配到多個(gè)更新終端中并行建模，得到每個(gè)發(fā)生變更人員對(duì)應(yīng)的模板數(shù)據(jù)，并將發(fā)生變更的模板數(shù)據(jù)新增或替換到對(duì)應(yīng)的各個(gè)特征分庫(kù)中，同時(shí)對(duì)發(fā)生變更的模板數(shù)據(jù)進(jìn)行標(biāo)記；
[0025]比對(duì)模塊，用于對(duì)每個(gè)特征分庫(kù)中有變更標(biāo)記的模板數(shù)據(jù)進(jìn)行匯總，將匯總后的模板數(shù)據(jù)平均分配到多個(gè)比對(duì)終端中并行查重比對(duì)，并將比對(duì)結(jié)果導(dǎo)入更新比對(duì)結(jié)果庫(kù)；
[0026]處理模塊，用于接受用戶對(duì)所述比對(duì)結(jié)果庫(kù)中比對(duì)結(jié)果的查詢、驗(yàn)證、下發(fā)處理、統(tǒng)計(jì)中的至少一項(xiàng)操作處理。
[0027]可選的，所述比對(duì)模塊包括:
[0028]分組單元，用于將待比對(duì)人員的模板數(shù)據(jù)根據(jù)比對(duì)終端的臺(tái)數(shù)平均分組，每組數(shù)據(jù)對(duì)應(yīng)一臺(tái)比對(duì)終端，假設(shè)每組數(shù)據(jù)的平均模板數(shù)為N，參與比對(duì)的更新終端數(shù)為X，其中N為自然數(shù)，X為偶數(shù)；
[0029]存儲(chǔ)分配單元，用于將每組數(shù)據(jù)按照公式N+XXN+2分配到每臺(tái)比對(duì)終端上，并按照上、下兩部分進(jìn)行存儲(chǔ)，其中上部分?jǐn)?shù)據(jù)按照公式N+X進(jìn)行存儲(chǔ)，下部分?jǐn)?shù)據(jù)按照公式 N+XX (X + 2-1) +N+X + 2 進(jìn)打存儲(chǔ)；
[0030]比對(duì)單元，用于將上、下兩部分?jǐn)?shù)據(jù)根據(jù)該比對(duì)終端的CPU內(nèi)核數(shù)平均分組，按照設(shè)定條件進(jìn)行設(shè)定特征的相互比對(duì)，在對(duì)比時(shí)首先將上、下部分?jǐn)?shù)據(jù)按照公式NX (N -1)+2進(jìn)行組內(nèi)比對(duì)，然后進(jìn)行各組間模板數(shù)據(jù)的交叉比對(duì)，其中所述設(shè)定條件包括相似度和返回結(jié)果數(shù)。
[0031]可選的，所述比對(duì)單元包括:
[0032]第一比對(duì)子單元，用于將入庫(kù)人員的模板數(shù)據(jù)按年齡、性別、地區(qū)中的至少一項(xiàng)平均分配到偶數(shù)臺(tái)比對(duì)終端上，以多層嵌套的方式存儲(chǔ)在各個(gè)比對(duì)終端中，按設(shè)定條件對(duì)入庫(kù)人員模版數(shù)據(jù)中的設(shè)定特征進(jìn)行單機(jī)相互比對(duì)，所述設(shè)定條件包括相似度和返回結(jié)果數(shù)；
[0033]第二比對(duì)子單元，用于通過(guò)X + 2公式計(jì)算出每臺(tái)比對(duì)終端與其它比對(duì)終端進(jìn)行比對(duì)的臺(tái)數(shù)，在單機(jī)比對(duì)完后再與所計(jì)算出的其它比對(duì)終端進(jìn)行交叉比對(duì)，其中X代表比對(duì)終端的臺(tái)數(shù)，X為偶數(shù)。
[0034]可選的，所述設(shè)定特征為人像特征數(shù)據(jù)或身份證號(hào)。
[0035]可選的，所述建模模塊還用于在核查比對(duì)時(shí)，獲取所要核驗(yàn)人員的圖像，從中提取對(duì)應(yīng)的人像特征數(shù)據(jù)，根據(jù)所要核驗(yàn)人員的信息和人像特征數(shù)據(jù)建立所要核驗(yàn)人員的模板數(shù)據(jù)，其中所要核驗(yàn)人員的信息包括年齡、性別、地區(qū)中的至少一項(xiàng)；
[0036]所述比對(duì)模塊還用于根據(jù)所要核驗(yàn)人員的信息設(shè)定比對(duì)條件，比對(duì)條件包括相似度和返回結(jié)果數(shù)，根據(jù)比對(duì)條件將所要核驗(yàn)人員對(duì)應(yīng)的人像特征數(shù)據(jù)在目標(biāo)人口庫(kù)中進(jìn)行比對(duì)，并將比對(duì)結(jié)果展示給用戶。

【專利附圖】

【附圖說(shuō)明】
[0037]為了更清楚地說(shuō)明本發(fā)明實(shí)施例或現(xiàn)有技術(shù)中的技術(shù)方案，下面將對(duì)實(shí)施例或現(xiàn)有技術(shù)描述中所需要使用的附圖作簡(jiǎn)單地介紹，顯而易見(jiàn)地，下面描述中的附圖僅僅是本發(fā)明的一些實(shí)施例，對(duì)于本領(lǐng)域普通技術(shù)人員來(lái)講，在不付出創(chuàng)造性勞動(dòng)的前提下，還可以根據(jù)這些附圖獲得其他的附圖。
[0038]圖1為本發(fā)明一個(gè)實(shí)施例的人口數(shù)據(jù)查重方法流程圖；
[0039]圖2為本發(fā)明一個(gè)實(shí)施例的人口數(shù)據(jù)查重方法中偶數(shù)臺(tái)比對(duì)終端分配算法的數(shù)據(jù)分布圖。

【具體實(shí)施方式】
[0040]下面將結(jié)合本發(fā)明實(shí)施例中的附圖，對(duì)本發(fā)明實(shí)施例中的技術(shù)方案進(jìn)行清楚、完整地描述，顯然，所描述的實(shí)施例僅僅是本發(fā)明一部分實(shí)施例，而不是全部的實(shí)施例?；诒景l(fā)明中的實(shí)施例，本領(lǐng)域普通技術(shù)人員在沒(méi)有付出創(chuàng)造性勞動(dòng)前提下所獲得的所有其他實(shí)施例，都屬于本發(fā)明保護(hù)的范圍。
[0041]圖1為本發(fā)明一個(gè)實(shí)施例的人口數(shù)據(jù)查重方法流程圖；圖2為本發(fā)明一個(gè)實(shí)施例的人口數(shù)據(jù)查重方法中偶數(shù)臺(tái)比對(duì)終端分配算法的數(shù)據(jù)分布圖。圖2中，1、2、3、4為對(duì)比終端的編號(hào)；(全)表示分配到該臺(tái)比對(duì)終端上的全部數(shù)據(jù)；(上)表示分配至該臺(tái)比對(duì)終端上的數(shù)據(jù)平分后的前半部分?jǐn)?shù)據(jù)；(下)表示分配至該臺(tái)比對(duì)終端上的數(shù)據(jù)平分后的后半部分?jǐn)?shù)據(jù)。其中，本發(fā)明中的比對(duì)終端可以是筆記本電腦、PC機(jī)、服務(wù)器、智能終端(如平板電腦)等。
[0042]如圖所示，人口數(shù)據(jù)查重方法包括以下步驟:
[0043]對(duì)多個(gè)不同的人口數(shù)據(jù)庫(kù)進(jìn)行數(shù)據(jù)變更監(jiān)控，通過(guò)實(shí)時(shí)或定時(shí)機(jī)制將發(fā)生變更的數(shù)據(jù)同步到每個(gè)人口數(shù)據(jù)庫(kù)對(duì)應(yīng)的人像分庫(kù)中，并對(duì)發(fā)生變更的數(shù)據(jù)進(jìn)行標(biāo)記；
[0044]對(duì)每個(gè)人像分庫(kù)中有變更標(biāo)記的數(shù)據(jù)進(jìn)行匯總，將匯總后的數(shù)據(jù)平均分配到多個(gè)更新終端中并行建模，得到每個(gè)發(fā)生變更人員對(duì)應(yīng)的模板數(shù)據(jù)，并將發(fā)生變更的模板數(shù)據(jù)新增或替換到對(duì)應(yīng)的各個(gè)特征分庫(kù)中，同時(shí)對(duì)發(fā)生變更的模板數(shù)據(jù)進(jìn)行標(biāo)記；
[0045]對(duì)每個(gè)特征分庫(kù)中有變更標(biāo)記的模板數(shù)據(jù)進(jìn)行匯總，將匯總后的模板數(shù)據(jù)平均分配到多個(gè)比對(duì)終端中并行查重比對(duì)，并將比對(duì)結(jié)果導(dǎo)入更新比對(duì)結(jié)果庫(kù)；
[0046]接受用戶對(duì)所述比對(duì)結(jié)果庫(kù)中比對(duì)結(jié)果的查詢、驗(yàn)證、下發(fā)處理、統(tǒng)計(jì)中的至少一項(xiàng)操作處理。
[0047]進(jìn)一步地，當(dāng)并行查重比對(duì)的比對(duì)終端的數(shù)目為偶數(shù)個(gè)時(shí)，將匯總后的模板數(shù)據(jù)平均分配到多個(gè)比對(duì)終端中并行查重比對(duì)包括:
[0048]將待比對(duì)人員的模板數(shù)據(jù)根據(jù)比對(duì)終端的臺(tái)數(shù)平均分組，每組數(shù)據(jù)對(duì)應(yīng)一臺(tái)比對(duì)終端，假設(shè)每組數(shù)據(jù)的平均模板數(shù)為N，參與比對(duì)的更新終端數(shù)為X，其中N為自然數(shù)，X為偶數(shù)；
[0049]將每組數(shù)據(jù)按照公式N+XXN+2分配到每臺(tái)比對(duì)終端上，并按照上、下兩部分進(jìn)行存儲(chǔ)，其中上部分?jǐn)?shù)據(jù)按照公式N+X進(jìn)行存儲(chǔ)，下部分?jǐn)?shù)據(jù)按照公式N~i~XX (X~i~2_l) +N~?~Χ~?~2 進(jìn)打存儲(chǔ)；
[0050]將上、下兩部分?jǐn)?shù)據(jù)根據(jù)該比對(duì)終端的CPU內(nèi)核數(shù)平均分組，按照設(shè)定條件進(jìn)行設(shè)定特征的相互比對(duì)，在對(duì)比時(shí)首先將上、下部分?jǐn)?shù)據(jù)按照公式NX (N - 1)+2進(jìn)行組內(nèi)比對(duì)，然后進(jìn)行各組間模板數(shù)據(jù)的交叉比對(duì)，其中所述設(shè)定條件包括相似度和返回結(jié)果數(shù)。
[0051]進(jìn)一步地，在多機(jī)大數(shù)據(jù)量查重比對(duì)時(shí)，將匯總后的模板數(shù)據(jù)平均分配到多個(gè)比對(duì)終端中并行查重比對(duì)包括:
[0052]將入庫(kù)人員的模板數(shù)據(jù)按年齡、性別、地區(qū)中的至少一項(xiàng)平均分配到偶數(shù)臺(tái)比對(duì)終端上，以多層嵌套的方式存儲(chǔ)在各個(gè)比對(duì)終端中，按設(shè)定條件對(duì)入庫(kù)人員模版數(shù)據(jù)中的設(shè)定特征進(jìn)行單機(jī)相互比對(duì)，所述設(shè)定條件包括相似度和返回結(jié)果數(shù)；
[0053]通過(guò)X + 2公式計(jì)算出每臺(tái)比對(duì)終端與其它比對(duì)終端進(jìn)行比對(duì)的臺(tái)數(shù)，在單機(jī)比對(duì)完后再與所計(jì)算出的其它比對(duì)終端進(jìn)行交叉比對(duì)，其中X代表比對(duì)終端的臺(tái)數(shù)，X為偶數(shù)。
[0054]進(jìn)一步地，所述設(shè)定特征為人像特征數(shù)據(jù)或身份證號(hào)。
[0055]進(jìn)一步地，上述人口數(shù)據(jù)清理比對(duì)方法還包括以下步驟:
[0056]在核查比對(duì)時(shí)，獲取所要核驗(yàn)人員的圖像，從中提取對(duì)應(yīng)的人像特征數(shù)據(jù)，根據(jù)所要核驗(yàn)人員的信息和人像特征數(shù)據(jù)建立所要核驗(yàn)人員的模板數(shù)據(jù)，其中所要核驗(yàn)人員的信息包括年齡、性別、地區(qū)中的至少一項(xiàng)；
[0057]根據(jù)所要核驗(yàn)人員的信息設(shè)定比對(duì)條件，比對(duì)條件包括相似度和返回結(jié)果數(shù)；
[0058]根據(jù)比對(duì)條件將所要核驗(yàn)人員對(duì)應(yīng)的人像特征數(shù)據(jù)在目標(biāo)人口庫(kù)中進(jìn)行比對(duì)，并將比對(duì)結(jié)果展示給用戶。
[0059]與上述方法實(shí)施例相適應(yīng)，以下為人口數(shù)據(jù)查重裝置實(shí)施例，人口數(shù)據(jù)查重裝置包括:
[0060]監(jiān)控模塊，用于對(duì)多個(gè)不同的人口數(shù)據(jù)庫(kù)進(jìn)行數(shù)據(jù)變更監(jiān)控，通過(guò)實(shí)時(shí)或定時(shí)機(jī)制將發(fā)生變更的數(shù)據(jù)同步到每個(gè)人口數(shù)據(jù)庫(kù)對(duì)應(yīng)的人像分庫(kù)中，并對(duì)發(fā)生變更的數(shù)據(jù)進(jìn)行標(biāo)記；
[0061]建模模塊，用于對(duì)每個(gè)人像分庫(kù)中有變更標(biāo)記的數(shù)據(jù)進(jìn)行匯總，將匯總后的數(shù)據(jù)平均分配到多個(gè)更新終端中并行建模，得到每個(gè)發(fā)生變更人員對(duì)應(yīng)的模板數(shù)據(jù)，并將發(fā)生變更的模板數(shù)據(jù)新增或替換到對(duì)應(yīng)的各個(gè)特征分庫(kù)中，同時(shí)對(duì)發(fā)生變更的模板數(shù)據(jù)進(jìn)行標(biāo)記；
[0062]比對(duì)模塊，用于對(duì)每個(gè)特征分庫(kù)中有變更標(biāo)記的模板數(shù)據(jù)進(jìn)行匯總，將匯總后的模板數(shù)據(jù)平均分配到多個(gè)比對(duì)終端中并行查重比對(duì)，并將比對(duì)結(jié)果導(dǎo)入更新比對(duì)結(jié)果庫(kù)；
[0063]處理模塊，用于接受用戶對(duì)所述比對(duì)結(jié)果庫(kù)中比對(duì)結(jié)果的查詢、驗(yàn)證、下發(fā)處理、統(tǒng)計(jì)中的至少一項(xiàng)操作處理。
[0064]進(jìn)一步地，所述比對(duì)模塊包括:
[0065]分組單元，用于將待比對(duì)人員的模板數(shù)據(jù)根據(jù)比對(duì)終端的臺(tái)數(shù)平均分組，每組數(shù)據(jù)對(duì)應(yīng)一臺(tái)比對(duì)終端，假設(shè)每組數(shù)據(jù)的平均模板數(shù)為N，參與比對(duì)的更新終端數(shù)為X，其中N為自然數(shù)，X為偶數(shù)；
[0066]存儲(chǔ)分配單元，用于將每組數(shù)據(jù)按照公式N+XXN+2分配到每臺(tái)比對(duì)終端上，并按照上、下兩部分進(jìn)行存儲(chǔ)，其中上部分?jǐn)?shù)據(jù)按照公式N+X進(jìn)行存儲(chǔ)，下部分?jǐn)?shù)據(jù)按照公式 N+XX (X + 2-1) +N+X + 2 進(jìn)打存儲(chǔ)；
[0067]比對(duì)單元，用于將上、下兩部分?jǐn)?shù)據(jù)根據(jù)該比對(duì)終端的CPU內(nèi)核數(shù)平均分組，按照設(shè)定條件進(jìn)行設(shè)定特征的相互比對(duì)，在對(duì)比時(shí)首先將上、下部分?jǐn)?shù)據(jù)按照公式NX (N -1)+2進(jìn)行組內(nèi)比對(duì)，然后進(jìn)行各組間模板數(shù)據(jù)的交叉比對(duì)，其中所述設(shè)定條件包括相似度和返回結(jié)果數(shù)。
[0068]進(jìn)一步地,所述比對(duì)單元包括:
[0069]第一比對(duì)子單元，用于將入庫(kù)人員的模板數(shù)據(jù)按年齡、性別、地區(qū)中的至少一項(xiàng)平均分配到偶數(shù)臺(tái)比對(duì)終端上，以多層嵌套的方式存儲(chǔ)在各個(gè)比對(duì)終端中，按設(shè)定條件對(duì)入庫(kù)人員模版數(shù)據(jù)中的設(shè)定特征進(jìn)行單機(jī)相互比對(duì)，所述設(shè)定條件包括相似度和返回結(jié)果數(shù)；
[0070]第二比對(duì)子單元，用于通過(guò)X + 2公式計(jì)算出每臺(tái)比對(duì)終端與其它比對(duì)終端進(jìn)行比對(duì)的臺(tái)數(shù)，在單機(jī)比對(duì)完后再與所計(jì)算出的其它比對(duì)終端進(jìn)行交叉比對(duì)，其中X代表比對(duì)終端的臺(tái)數(shù)，X為偶數(shù)。
[0071]進(jìn)一步地，所述設(shè)定特征為人像特征數(shù)據(jù)或身份證號(hào)。
[0072]進(jìn)一步地，所述建模模塊還用于在核查比對(duì)時(shí)，獲取所要核驗(yàn)人員的圖像，從中提取對(duì)應(yīng)的人像特征數(shù)據(jù)，根據(jù)所要核驗(yàn)人員的信息和人像特征數(shù)據(jù)建立所要核驗(yàn)人員的模板數(shù)據(jù)，其中所要核驗(yàn)人員的信息包括年齡、性別、地區(qū)中的至少一項(xiàng)；
[0073]所述比對(duì)模塊還用于根據(jù)所要核驗(yàn)人員的信息設(shè)定比對(duì)條件，比對(duì)條件包括相似度和返回結(jié)果數(shù)，根據(jù)比對(duì)條件將所要核驗(yàn)人員對(duì)應(yīng)的人像特征數(shù)據(jù)在目標(biāo)人口庫(kù)中進(jìn)行比對(duì)，并將比對(duì)結(jié)果展示給用戶。
[0074]本領(lǐng)域普通技術(shù)人員可以理解:附圖只是一個(gè)實(shí)施例的示意圖，附圖中的模塊或流程并不一定是實(shí)施本發(fā)明所必須的。
[0075]本領(lǐng)域普通技術(shù)人員可以理解:實(shí)施例中的裝置中的模塊可以按照實(shí)施例描述分布于實(shí)施例的裝置中，也可以進(jìn)行相應(yīng)變化位于不同于本實(shí)施例的一個(gè)或多個(gè)裝置中。上述實(shí)施例的模塊可以合并為一個(gè)模塊，也可以進(jìn)一步拆分成多個(gè)子模塊。
[0076]最后應(yīng)說(shuō)明的是:以上實(shí)施例僅用以說(shuō)明本發(fā)明的技術(shù)方案，而非對(duì)其限制；盡管參照前述實(shí)施例對(duì)本發(fā)明進(jìn)行了詳細(xì)的說(shuō)明，本領(lǐng)域的普通技術(shù)人員應(yīng)當(dāng)理解:其依然可以對(duì)前述實(shí)施例所記載的技術(shù)方案進(jìn)行修改，或者對(duì)其中部分技術(shù)特征進(jìn)行等同替換；而這些修改或者替換，并不使相應(yīng)技術(shù)方案的本質(zhì)脫離本發(fā)明實(shí)施例技術(shù)方案的精神和范圍。
【權(quán)利要求】
1.一種人口數(shù)據(jù)查重方法，其特征在于，包括以下步驟: 對(duì)多個(gè)不同的人口數(shù)據(jù)庫(kù)進(jìn)行數(shù)據(jù)變更監(jiān)控，通過(guò)實(shí)時(shí)或定時(shí)機(jī)制將發(fā)生變更的數(shù)據(jù)同步到每個(gè)人口數(shù)據(jù)庫(kù)對(duì)應(yīng)的人像分庫(kù)中，并對(duì)發(fā)生變更的數(shù)據(jù)進(jìn)行標(biāo)記； 對(duì)每個(gè)人像分庫(kù)中有變更標(biāo)記的數(shù)據(jù)進(jìn)行匯總，將匯總后的數(shù)據(jù)平均分配到多個(gè)更新終端中并行建模，得到每個(gè)發(fā)生變更人員對(duì)應(yīng)的模板數(shù)據(jù)，并將發(fā)生變更的模板數(shù)據(jù)新增或替換到對(duì)應(yīng)的各個(gè)特征分庫(kù)中，同時(shí)對(duì)發(fā)生變更的模板數(shù)據(jù)進(jìn)行標(biāo)記； 對(duì)每個(gè)特征分庫(kù)中有變更標(biāo)記的模板數(shù)據(jù)進(jìn)行匯總，將匯總后的模板數(shù)據(jù)平均分配到多個(gè)比對(duì)終端中并行查重比對(duì)，并將比對(duì)結(jié)果導(dǎo)入更新比對(duì)結(jié)果庫(kù)； 接受用戶對(duì)所述比對(duì)結(jié)果庫(kù)中比對(duì)結(jié)果的查詢、驗(yàn)證、下發(fā)處理、統(tǒng)計(jì)中的至少一項(xiàng)操作處理。
2.根據(jù)權(quán)利要求1所述的人口數(shù)據(jù)查重方法，其特征在于，當(dāng)并行查重比對(duì)的比對(duì)終端的數(shù)目為偶數(shù)個(gè)時(shí)，將匯總后的模板數(shù)據(jù)平均分配到多個(gè)比對(duì)終端中并行查重比對(duì)包括: 將待比對(duì)人員的模板數(shù)據(jù)根據(jù)比對(duì)終端的臺(tái)數(shù)平均分組，每組數(shù)據(jù)對(duì)應(yīng)一臺(tái)比對(duì)終端，假設(shè)每組數(shù)據(jù)的平均模板數(shù)為N，參與比對(duì)的更新終端數(shù)為X，其中N為自然數(shù)，X為偶數(shù)； 將每組數(shù)據(jù)按照公式N+XXN+2分配到每臺(tái)比對(duì)終端上，并按照上、下兩部分進(jìn)行存儲(chǔ)，其中上部分?jǐn)?shù)據(jù)按照公式N+X進(jìn)行存儲(chǔ)，下部分?jǐn)?shù)據(jù)按照公式N~i~XX (X~i~2_l)進(jìn)打存儲(chǔ)； 將上、下兩部分?jǐn)?shù)據(jù)根據(jù)該比對(duì)終端的CPU內(nèi)核數(shù)平均分組，按照設(shè)定條件進(jìn)行設(shè)定特征的相互比對(duì)，在對(duì)比時(shí)首先將上、下部分?jǐn)?shù)據(jù)按照公式NX (N - 1)+2進(jìn)行組內(nèi)比對(duì)，然后進(jìn)行各組間模板數(shù)據(jù)的交叉比對(duì)，其中所述設(shè)定條件包括相似度和返回結(jié)果數(shù)。
3.根據(jù)權(quán)利要求1所述的人口數(shù)據(jù)查重方法，其特征在于，在多機(jī)大數(shù)據(jù)量查重比對(duì)時(shí)，將匯總后的模板數(shù)據(jù)平均分配到多個(gè)比對(duì)終端中并行查重比對(duì)包括: 將入庫(kù)人員的模板數(shù)據(jù)按年齡、性別、地區(qū)中的至少一項(xiàng)平均分配到偶數(shù)臺(tái)比對(duì)終端上，以多層嵌套的方式存儲(chǔ)在各個(gè)比對(duì)終端中，按設(shè)定條件對(duì)入庫(kù)人員模版數(shù)據(jù)中的設(shè)定特征進(jìn)行單機(jī)相互比對(duì)，所述設(shè)定條件包括相似度和返回結(jié)果數(shù)； 通過(guò)X+2公式計(jì)算出每臺(tái)比對(duì)終端與其它比對(duì)終端進(jìn)行比對(duì)的臺(tái)數(shù)，在單機(jī)比對(duì)完后再與所計(jì)算出的其它比對(duì)終端進(jìn)行交叉比對(duì)，其中X代表比對(duì)終端的臺(tái)數(shù)，X為偶數(shù)。
4.根據(jù)權(quán)利要求3所述的人口數(shù)據(jù)查重方法，其特征在于，所述設(shè)定特征為人像特征數(shù)據(jù)或身份證號(hào)。
5.根據(jù)權(quán)利要求1所述的人口數(shù)據(jù)查重方法，其特征在于，還包括以下步驟: 在核查比對(duì)時(shí)，獲取所要核驗(yàn)人員的圖像，從中提取對(duì)應(yīng)的人像特征數(shù)據(jù)，根據(jù)所要核驗(yàn)人員的信息和人像特征數(shù)據(jù)建立所要核驗(yàn)人員的模板數(shù)據(jù)，其中所要核驗(yàn)人員的信息包括年齡、性別、地區(qū)中的至少一項(xiàng)； 根據(jù)所要核驗(yàn)人員的信息設(shè)定比對(duì)條件，比對(duì)條件包括相似度和返回結(jié)果數(shù)； 根據(jù)比對(duì)條件將所要核驗(yàn)人員對(duì)應(yīng)的人像特征數(shù)據(jù)在目標(biāo)人口庫(kù)中進(jìn)行比對(duì)，并將比對(duì)結(jié)果展示給用戶。
6.一種人口數(shù)據(jù)查重裝置，其特征在于，包括: 監(jiān)控模塊，用于對(duì)多個(gè)不同的人口數(shù)據(jù)庫(kù)進(jìn)行數(shù)據(jù)變更監(jiān)控，通過(guò)實(shí)時(shí)或定時(shí)機(jī)制將發(fā)生變更的數(shù)據(jù)同步到每個(gè)人口數(shù)據(jù)庫(kù)對(duì)應(yīng)的人像分庫(kù)中，并對(duì)發(fā)生變更的數(shù)據(jù)進(jìn)行標(biāo)記； 建模模塊，用于對(duì)每個(gè)人像分庫(kù)中有變更標(biāo)記的數(shù)據(jù)進(jìn)行匯總，將匯總后的數(shù)據(jù)平均分配到多個(gè)更新終端中并行建模，得到每個(gè)發(fā)生變更人員對(duì)應(yīng)的模板數(shù)據(jù)，并將發(fā)生變更的模板數(shù)據(jù)新增或替換到對(duì)應(yīng)的各個(gè)特征分庫(kù)中，同時(shí)對(duì)發(fā)生變更的模板數(shù)據(jù)進(jìn)行標(biāo)記； 比對(duì)模塊，用于對(duì)每個(gè)特征分庫(kù)中有變更標(biāo)記的模板數(shù)據(jù)進(jìn)行匯總，將匯總后的模板數(shù)據(jù)平均分配到多個(gè)比對(duì)終端中并行查重比對(duì)，并將比對(duì)結(jié)果導(dǎo)入更新比對(duì)結(jié)果庫(kù)； 處理模塊，用于接受用戶對(duì)所述比對(duì)結(jié)果庫(kù)中比對(duì)結(jié)果的查詢、驗(yàn)證、下發(fā)處理、統(tǒng)計(jì)中的至少一項(xiàng)操作處理。
7.根據(jù)權(quán)利要求6所述的人口數(shù)據(jù)查重裝置，其特征在于，所述比對(duì)模塊包括: 分組單元，用于將待比對(duì)人員的模板數(shù)據(jù)根據(jù)比對(duì)終端的臺(tái)數(shù)平均分組，每組數(shù)據(jù)對(duì)應(yīng)一臺(tái)比對(duì)終端，假設(shè)每組數(shù)據(jù)的平均模板數(shù)為N，參與比對(duì)的更新終端數(shù)為X，其中N為自然數(shù)，X為偶數(shù)； 存儲(chǔ)分配單元，用于將每組數(shù)據(jù)按照公式N+XXN+2分配到每臺(tái)比對(duì)終端上，并按照上、下兩部分進(jìn)行存儲(chǔ)，其中上部分?jǐn)?shù)據(jù)按照公式N+X進(jìn)行存儲(chǔ)，下部分?jǐn)?shù)據(jù)按照公式N~i~XX (X~i~2_l) +N~?~Χ~?~2 進(jìn)打存儲(chǔ)； 比對(duì)單元，用于將上、下兩部分?jǐn)?shù)據(jù)根據(jù)該比對(duì)終端的CPU內(nèi)核數(shù)平均分組，按照設(shè)定條件進(jìn)行設(shè)定特征的相互比對(duì)，在對(duì)比時(shí)首先將上、下部分?jǐn)?shù)據(jù)按照公式NX (N -1)+2進(jìn)行組內(nèi)比對(duì)，然后進(jìn)行各組間模板數(shù)據(jù)的交叉比對(duì)，其中所述設(shè)定條件包括相似度和返回結(jié)果數(shù)。
8.根據(jù)權(quán)利要求7所述的人口數(shù)據(jù)查重裝置，其特征在于，所述比對(duì)單元包括: 第一比對(duì)子單元，用于將入庫(kù)人員的模板數(shù)據(jù)按年齡、性別、地區(qū)中的至少一項(xiàng)平均分配到偶數(shù)臺(tái)比對(duì)終端上，以多層嵌套的方式存儲(chǔ)在各個(gè)比對(duì)終端中，按設(shè)定條件對(duì)入庫(kù)人員模版數(shù)據(jù)中的設(shè)定特征進(jìn)行單機(jī)相互比對(duì)，所述設(shè)定條件包括相似度和返回結(jié)果數(shù)； 第二比對(duì)子單元，用于通過(guò)X + 2公式計(jì)算出每臺(tái)比對(duì)終端與其它比對(duì)終端進(jìn)行比對(duì)的臺(tái)數(shù)，在單機(jī)比對(duì)完后再與所計(jì)算出的其它比對(duì)終端進(jìn)行交叉比對(duì)，其中X代表比對(duì)終端的臺(tái)數(shù)，X為偶數(shù)。
9.根據(jù)權(quán)利要求8所述的人口數(shù)據(jù)查重裝置，其特征在于，所述設(shè)定特征為人像特征數(shù)據(jù)或身份證號(hào)。
10.根據(jù)權(quán)利要求6所述的人口數(shù)據(jù)查重裝置，其特征在于: 所述建模模塊還用于在核查比對(duì)時(shí)，獲取所要核驗(yàn)人員的圖像，從中提取對(duì)應(yīng)的人像特征數(shù)據(jù)，根據(jù)所要核驗(yàn)人員的信息和人像特征數(shù)據(jù)建立所要核驗(yàn)人員的模板數(shù)據(jù)，其中所要核驗(yàn)人員的信息包括年齡、性別、地區(qū)中的至少一項(xiàng)； 所述比對(duì)模塊還用于根據(jù)所要核驗(yàn)人員的信息設(shè)定比對(duì)條件，比對(duì)條件包括相似度和返回結(jié)果數(shù)，根據(jù)比對(duì)條件將所要核驗(yàn)人員對(duì)應(yīng)的人像特征數(shù)據(jù)在目標(biāo)人口庫(kù)中進(jìn)行比對(duì)，并將比對(duì)結(jié)果展示給用戶。
【文檔編號(hào)】G06F17/30GK104268153SQ201410440728
【公開(kāi)日】2015年1月7日 申請(qǐng)日期:2014年9月1日 優(yōu)先權(quán)日:2014年9月1日
【發(fā)明者】湯滔, 張建光, 陶勇, 喬曉光, 鄒繼文 申請(qǐng)人:北京航天金盾科技有限公司