人臉識別，是基于人的臉部特征信息進行身份識別的一種生物識別技術(shù)。用攝像機或攝像頭采集含有人臉的圖像或視頻流，并自動在圖像中檢測和跟蹤人臉，進而對檢測到的人臉進行臉部的一系列相關(guān)技術(shù)，通常也叫做人像識別、面部識別。
人臉識別是一項熱門的計算機技術(shù)研究領(lǐng)域，它屬于生物特征識別技術(shù)，是對生物體(一般特指人)本身的生物特征來區(qū)分生物體個體。生物特征識別技術(shù)所研究的生物特征包括臉、指紋、手掌紋、虹膜、視網(wǎng)膜、聲音(語音)、體形、個人習(xí)慣(例如敲擊鍵盤的力度和頻率、簽字)等，相應(yīng)的識別技術(shù)就有人臉識別、指紋識別、掌紋識別、虹膜識別、視網(wǎng)膜識別、語音識別(用語音識別可以進行身份識別，也可以進行語音內(nèi)容的識別，只有前者屬于生物特征識別技術(shù))、體形識別、鍵盤敲擊識別、簽字識別等。
三大關(guān)鍵技術(shù)
一、基于特征的人臉檢測技術(shù)
通過采用顏色、輪廓、紋理、結(jié)構(gòu)或者直方圖特征等進行人臉檢測。
二、基于模板匹配人臉檢測技術(shù)
從數(shù)據(jù)庫當(dāng)中提取人臉模板，接著采取一定模板匹配策略，使抓取人臉圖像與從模板庫提取圖片相匹配，由相關(guān)性的高低和所匹配的模板大小確定人臉大小以及位置信息。
三、基于統(tǒng)計的人臉檢測技術(shù)
通過對于“人臉”和“非人臉”的圖像大量搜集構(gòu)成的人臉正、負樣本庫，采用統(tǒng)計方法強化訓(xùn)練該系統(tǒng)，從而實現(xiàn)對人臉和非人臉的模式進行檢測和分類。
四大特征
1、幾何特征
從面部點之間的距離和比率作為特征，識別速度快，內(nèi)存要求比較小，對于光照敏感度降低。
2、基于模型特征
根據(jù)不同特征狀態(tài)所具有概率不同而提取人臉圖像特征。
3、基于統(tǒng)計特征
將人臉圖像視為隨機向量，并用統(tǒng)計方法辨別不同人臉特征模式，比較典型的有特征臉、獨立成分分析、奇異值分解等。
4、基于神經(jīng)網(wǎng)絡(luò)特征
利用大量神經(jīng)單元對人臉圖像特征進行聯(lián)想存儲和記憶，根據(jù)不同神經(jīng)單元狀態(tài)的概率實現(xiàn)對人臉圖像準確識別。
難點
1、光照問題
光照變化是影響人臉識別性能的zui關(guān)鍵因素，對該問題的解決程度關(guān)系著人臉識別實用化進程的成敗。由于人臉的3D結(jié)構(gòu)，光照投射出的陰影，會加強或減弱原有的人臉特征。尤其是在夜晚，由于光線不足造成的面部陰影會導(dǎo)致識別率的急劇下降，使得系統(tǒng)難以滿足實用要求。
同時，理論和實驗還證明同一個體因光照不同引起的差異，大于同一光照下不同個體之間的差異。光照問題是機器視覺中的老問題，在人臉識別中的表現(xiàn)尤為明顯。解決光照問題的方案有三維圖像人臉識別和熱成像人臉識別。但這兩種技術(shù)還遠不成熟，識別效果不盡人意。
2、姿態(tài)問題
人臉識別主要依據(jù)人的面部表象特征來進行，如何識別由姿態(tài)引起的面部變化就成了該技術(shù)的難點之一。姿態(tài)問題涉及頭部在三維垂直坐標系中繞三個軸的旋轉(zhuǎn)造成的面部變化，其中垂直于圖像平面的兩個方向的深度旋轉(zhuǎn)會造成面部信息的部分缺失。使得姿態(tài)問題成為人臉識別的一個技術(shù)難題。
針對姿態(tài)的研究相對比較的少，目前多數(shù)的人臉識別算法主要針列正面、準正面人臉圖像，當(dāng)發(fā)生俯仰或者左右側(cè)而比較厲害的情況下，人臉識別算法的識別率也將會急劇下降。
3、表情問題
面部幅度較大的哭、笑、憤怒等表情變化同樣影像著面部識別的準確率?，F(xiàn)有的技術(shù)對這些方面處理得還不錯，論是張嘴還是做一些夸張的表情，計算機都可以通過三維建模和姿態(tài)表情校正的方法把它糾正出來。
4、遮擋問題
對于非配合情況下的人臉圖像采集，遮擋問題是一個非常嚴重的問題。特別是在監(jiān)控環(huán)境下，往往被監(jiān)控對象都會帶著眼鏡、帽子等飾物，使得被采集出來的人臉圖像有可能不完整，從而影響了后面的特征提取與識別，甚至?xí)?dǎo)致人臉檢測算法的失效。
5、年齡變化
隨著年齡的變化，一個人從少年變成青年，變成老年，他的容貌可能會發(fā)生比較大的變化，從而導(dǎo)致識別率的下降。對于不同的年齡段，人臉識別算法的識別率也不同。這個問題zui直接的例子就是*照片的識別，在我國*的有效期一般都是20年，這20年間每個人的容貌必然會發(fā)生相當(dāng)大的變化，所有在識別上也同樣存在很大的問題。
6、人臉相似性
不同個體之間的區(qū)別不大，所有的人臉的結(jié)構(gòu)都相似，甚至人臉器官的結(jié)構(gòu)外形都很相似。這樣的特點對于利用人臉進行定位是有利的，但是對于利用人臉區(qū)分人類個體是不利的。
7、動態(tài)識別
非配合性人臉識別的情況下，運動導(dǎo)致面部圖像模糊或攝像頭對焦不正確都會嚴重影響面部識別的成功率。在地鐵、高速公路卡口、車站卡口、超市反扒、邊檢等安保和監(jiān)控識別的使用中，這種困難明顯突出。
8、人臉防偽
偽造人臉圖像進行識別的主流欺騙手段是建立一個三維模型，或者是一些表情的嫁接。隨著人臉防偽技術(shù)的完善、3D面部識別技術(shù)、攝像頭等智能計算視覺技術(shù)的引入，偽造面部圖像進行識別的成功率會大大降低。
9、圖像質(zhì)量問題
人臉圖像的來源可能多種多樣，由于采集設(shè)備的不同，得到的人臉圖像質(zhì)量也不一樣，特別是對于那些低分辨率、噪聲大、質(zhì)量差的人臉圖像(如手機攝像頭拍攝的人臉圖片、遠程監(jiān)控拍攝的圖片等)如何進行有效地人臉識別是個需要關(guān)注的問題。同樣的，對于高分辨圖像對人臉識別算法的影響也需要進一步的研究?，F(xiàn)在，我們在人臉識別時，一般采用的都是相同尺寸，清晰度很接近的人臉圖片，所以圖像質(zhì)量問題基本可以解決，但是面對現(xiàn)實中更加復(fù)雜的問題，還需要繼續(xù)優(yōu)化處理。
10、樣本缺乏
基于統(tǒng)計學(xué)習(xí)的人臉識別算法是目前人臉識別領(lǐng)域中的主流算法，但是統(tǒng)計學(xué)習(xí)方法需要大量的訓(xùn)練。由于人臉圖像在高維空間中的分布是一個不規(guī)則的流形分布，能得到的樣本只是對人臉圖像空間中的一個極小部分的采樣，如何解決小樣本下的統(tǒng)計學(xué)習(xí)問題有待進一步的研究。此外，現(xiàn)在參與訓(xùn)練的人臉圖像庫基本都是外國人的圖像，有關(guān)中國人、亞洲人的人臉圖像庫少之又少，給訓(xùn)練人臉識別模型增加了難度。
人臉識別應(yīng)用維度
動態(tài)場景兩個維度
*，1:1。
1:1的定義是一個判斷的作用，應(yīng)用的場景其實是在金融和人證，特點是更加的和安全，所以現(xiàn)在大家不管是支付寶還是銀行的人證比對、實名的業(yè)務(wù)，基本上都會用到1:1人臉的識別。
第二，1:N。
1：N更多的是在一個數(shù)據(jù)庫當(dāng)中或者是一個底庫當(dāng)中，能夠找到這個人是不是在底庫當(dāng)中的人，所以是個識別的過程，是一個動態(tài)的，還是一個非配合的場景，比如說在安防當(dāng)中我去緝拿逃犯，我去抓到逃犯總不能讓逃犯看到攝象頭。在商業(yè)場景當(dāng)中也不可能讓我們的VIP客戶、員工、會員對著攝象頭做著一遍操作，所以是動態(tài)和非配合的場景。
業(yè)務(wù)場景四個維度
*，盤子足夠大，能夠支撐公司的長遠發(fā)展。
第二，數(shù)據(jù)回流。
第三，是否是高頻的場景和高頻的使用。
第四，是否可復(fù)制，可否從1+0轉(zhuǎn)變到1+N的方式，提率。
可視化系統(tǒng)三個維度
*，人員通行管理。
第二，傳感網(wǎng)絡(luò)的融合。
第三，商業(yè)地產(chǎn)+新零售整體的融合部分。
人臉識別應(yīng)用領(lǐng)域
應(yīng)用領(lǐng)域：金融、司法、安保、邊檢、航天、電力、教育、醫(yī)療，等。
商業(yè)化四大潛力：閘機、交通、銀行、手機
人臉識別類別及其對應(yīng)應(yīng)用領(lǐng)域一覽
具體應(yīng)用場景概述
金融領(lǐng)域：
1、人臉識別自主終端
人工審核、自主開卡、業(yè)務(wù)變更、密碼重置，等一些個人業(yè)務(wù)。
2、移動金融、銷售
遠程身份核實驗證，兩個方面：用戶身份的核實及金融機構(gòu)的上門辦理業(yè)務(wù)所需的帶有人臉識別系統(tǒng)的便攜式設(shè)備。
3、柜面系統(tǒng)
人臉聯(lián)網(wǎng)核驗，用于銀行、保險、證券等金融機構(gòu)的柜面開戶，等業(yè)務(wù)。
國內(nèi)機場應(yīng)用三關(guān)鍵點：嘗試、登機、全面智能化
標志性：
1、2009年北京首都機場的嘗試是國內(nèi)機場開始認識人臉識別技術(shù)的*步，而限于當(dāng)時人臉識別技術(shù)的水平，不得不采用磁卡進行交叉驗證，確保身份的*性。在識別速度及準確率上，當(dāng)時的人臉識別技術(shù)與深度學(xué)習(xí)介入后的人臉識別技術(shù)不在一個水平上。
2、2014年南京祿口機場嘗試將人臉識別技術(shù)應(yīng)用在登機上，雖然同樣受限于當(dāng)時的技術(shù)商業(yè)落地的水平，無法實現(xiàn)自助通關(guān)，卻為接下去的應(yīng)用提供了借鑒的想法和經(jīng)驗。
3、2016年12月，銀川機場的全面智能化，標志機場智能化水平進入到一個新的階段。除了安檢通關(guān)和自助登機，人臉識別及相關(guān)的計算機視覺技術(shù)被應(yīng)用到動態(tài)布控、人流引導(dǎo)、智慧航顯、VIP迎賓、軌跡檢索、保潔提醒等多個方面，為2017年人臉識別技術(shù)在機場應(yīng)用的爆發(fā)打下了良好的基礎(chǔ)。
南航----國內(nèi)運用人臉識別技術(shù)的航司！CZ3384成為*個應(yīng)用新技術(shù)登機的航班。旅客無需手持登機牌，刷臉即可快速通過登機口。
中國式過馬路問題:
?、?用上人臉識別 解決成本難題。
?、?堅持依法行政 ,防止法外之罰。
?、?解決路權(quán)沖突 ,避免運動執(zhí)法。
實例：
據(jù)濟南警方介紹，人臉識別系統(tǒng)主要用于抓拍闖紅燈的行人和非機動車駕駛者，在晚上也能清晰成像。行人被“抓了現(xiàn)行”，闖紅燈的短視頻和放大后的頭像將直接曝光在路口的顯示屏上，呈現(xiàn)在公眾面前。
此外，這套設(shè)備還與居民身份信息系統(tǒng)相連，通過人臉識別出的違法者姓名、*號碼等個人信息，也將顯示在電子屏上。
濟南啟用人臉識別系統(tǒng)后，一個月共抓拍6200多起行人和非機動車闖紅燈違法行為。有了“黑科技”的威懾，闖紅燈的行為得到了有效遏制，有一個路口每天闖紅燈的人次從逾百次降到了十幾次。
在重慶江北，人臉識別系統(tǒng)試運行以來，行人過街守法率從60%上升到97%以上。
隱患：個人信息公之于眾，牽扯到泄露個人隱私的問題。專家建議，對于人臉識別等信息采集行為，要提前向社會進行公告，告知公眾已進入公共信息采集區(qū)域，違法行為將被拍攝并曝光，這樣既滿足了群眾的知情權(quán)，也起到警示提醒作用;對采集的信息，要進行適當(dāng)技術(shù)處理，對于不宜公開的隱私，應(yīng)當(dāng)遮蔽或不予公開。
根本：受訪專家表示，由于交通設(shè)施的設(shè)置不合理導(dǎo)致的過馬路難，往往是導(dǎo)致行人闖紅燈的更主要原因。有的城市道路路網(wǎng)規(guī)劃不合理，注重主干路建設(shè)，支路和次干路密度達不到要求，導(dǎo)致行人和非機動車都被匯集到主干路上;有的路口紅綠燈時間分配不合理，若是按規(guī)則過馬路，就得有足夠強的耐心和足夠快的速度。只有綜合治理，解決好人與車“路權(quán)”沖突，才能從根本上破解“中國式過馬路”。
教育領(lǐng)域：考生身份認證識別、校園、宿舍出入管理等場景。
實例：2016年高考，已有北京、四川、湖北、廣東、遼寧、內(nèi)蒙古等多省采用“人臉識別+指紋識別”的生物識別技術(shù)確認考生身份，防止替考、作弊事件發(fā)生。伴隨試點區(qū)域及各領(lǐng)域案例的拓展及運營模式的成熟，行業(yè)報告研究院預(yù)計2017年人臉識別有望迎來大規(guī)模普及。
*領(lǐng)域：
(1)人臉捕獲與跟蹤功能。
(2)人臉識別計算。
(3)人臉的建模與檢索。
*領(lǐng)域人臉識別產(chǎn)品
使用主要體現(xiàn)在兩個方面：一方面是后臺動態(tài)人臉識別系統(tǒng)的使用，另一方面是前端人臉識別手持設(shè)備及人證對比機的使用。
醫(yī)療領(lǐng)域：
1、社區(qū)體檢應(yīng)用
在社區(qū)使用數(shù)字化體檢設(shè)備(*、人體秤、*等)時把數(shù)據(jù)傳到數(shù)去電子病歷或健康檔案的同時，加上就診者的活體人臉信息之后存儲，就有了真實*的身份識別。在完成*身份認證后的每一次記錄都會被記載，這樣可以將就診者情況迅速反饋給醫(yī)師及就診者本人，也方便得出*的理療方案。
2、二級及以上醫(yī)療機構(gòu)的應(yīng)用
通過在自助機、窗口、診療室等不同場景設(shè)置人臉識別系統(tǒng)，以識別的人臉信息為信息檢索入口，將患者的信息檔案相關(guān)聯(lián)，然后就可以刷臉調(diào)取診療記錄，等。
智慧城市領(lǐng)域：
1、養(yǎng)老金領(lǐng)取管理
利用人臉識別技術(shù)可以有效地進行人員核對，減少養(yǎng)老金的流失。
2、辦稅認證系統(tǒng)
通過人臉識別技術(shù)，系統(tǒng)自動將鏡頭攝取人像同*部門身份信息中的人像進行比對，實時完成實名認證。不僅有效緩解了窗口辦稅人員的壓力，提升了辦稅效率，還增強了實名制辦稅體驗，降低了涉稅風(fēng)險。
4、社區(qū)管理系統(tǒng)
在智慧城市中，以城市中zui小的單元社區(qū)為例，通過非配合式人臉識別，可以幫助物業(yè)管理部門在訪客管理、物業(yè)通知(水電費通知、車庫信息等)等方面為業(yè)主提供更加友好自然的生活體驗。
5、樓宇門禁系統(tǒng)
人臉識別智能門禁系統(tǒng)通過構(gòu)建具有智能化管理功能的身份識別系統(tǒng)，結(jié)合*的人臉識別算法，能、快速地識別人臉并打開門禁，提高了樓宇、家庭的安全。
6、考生身份驗證管理系統(tǒng)
立足考試行業(yè)的特殊需求，集計算機、通信、網(wǎng)絡(luò)、人臉識別技術(shù)、數(shù)據(jù)庫等多元化技術(shù)為一體的應(yīng)用系統(tǒng)項目，為考試機構(gòu)提供考生*信息提取、身份驗證、管理等功能，構(gòu)建更為、公平的考試環(huán)境。
7、駕駛學(xué)員的身份信息認證和安全駕駛管理系統(tǒng)
包括到場驗證、學(xué)員身份認證、上車下車簽到、駕駛時間的控制等。
8、智能膳食管理系統(tǒng)
系統(tǒng)在學(xué)生打飯時進行人臉識別，記錄學(xué)生每天進食的菜式，再根據(jù)醫(yī)院體檢結(jié)果對比分析得出膳食調(diào)整意見，對于學(xué)生單次浪費的食物超過規(guī)定值時予以記錄，然后不斷的優(yōu)化菜品以達到調(diào)整和*優(yōu)化學(xué)生飲食結(jié)構(gòu)的目的。
9、商業(yè)智能分析系統(tǒng)
人臉識別系統(tǒng)能充分利用機器視覺對人臉的特征識別和歸納能力，將客戶的性別、年齡、心情等作為商業(yè)需求的對應(yīng)特征，針對性的實時推送客戶感興趣的內(nèi)容，為商家進行目標客戶群導(dǎo)流和銷售；另一方面，通過對不同人群的興趣內(nèi)容的觀察和學(xué)習(xí)，逐步提升對目標人群推送內(nèi)容的匹配度。
