摘要：最近有合作公司的項(xiàng)目需要服務(wù)端人臉識(shí)別的開發(fā)，于是就用了公司的人臉識(shí)別開發(fā)，由于之前對(duì)服務(wù)端開發(fā)介紹的資料比較少，正好這次又做了這個(gè)項(xiàng)目，花了幾天的開發(fā)，這里就簡(jiǎn)單分享一下個(gè)人的見解。

最近有合作公司的項(xiàng)目需要服務(wù)端人臉識(shí)別的開發(fā)，于是就用了公司的人臉識(shí)別SDK開發(fā)，由于之前對(duì)服務(wù)端開發(fā)介紹的資料比較少，正好這次又做了這個(gè)項(xiàng)目，花了幾天的開發(fā)，這里就簡(jiǎn)單分享一下個(gè)人的見解。

人臉檢測(cè)接口就是可以把一張圖片的人臉照片圖， 經(jīng)過FaceEngine的處理，檢測(cè)出人人臉框信息。檢測(cè)模式有兩種，image模式和video模式，image模式對(duì)于人臉檢測(cè)準(zhǔn)確率比較高，但性能沒有video模式高。video模式適用于在視頻流模式下，在視頻流模式有更快的處理性能和更好的人臉框穩(wěn)定性。Video模式下，處理一幀圖片在10毫秒內(nèi)，所以在30幀的視頻中，可以輕松的對(duì)每幀進(jìn)行人臉檢測(cè)。

特征提取是在檢測(cè)出人臉框的基礎(chǔ)上，尋找出該人臉最具特別性的描述，該描述可被傳輸和保存，在ArcFace2.0中，一個(gè)特征占用1032字節(jié)，特征提取要花100-150毫秒，所以每幀都做特征提取是不可行的，但借助TrackID，可以做到一張人臉只要提取一次人臉特征。

人臉比對(duì)即特征比對(duì)，對(duì)兩張人臉照片圖分別提取特征，然后進(jìn)行比較，獲取相似度。該比對(duì)的時(shí)間是微妙級(jí)的，但在實(shí)際的應(yīng)用過程中，往往是幾千個(gè)特征甚至幾萬個(gè)特征進(jìn)行比對(duì)，所以處理時(shí)間要成倍的增加。假設(shè)處理一個(gè)特征需要3微妙，那么在5萬的特征庫中進(jìn)行比較，時(shí)間就是3*50000=150毫秒

無感是永遠(yuǎn)的痛
人臉識(shí)別經(jīng)常用在一些實(shí)時(shí)性比較高的場(chǎng)合，比如門禁這類系統(tǒng)，客戶往往要求我們要“無感”通過。這些實(shí)時(shí)性高的系統(tǒng)，通常利用網(wǎng)絡(luò)傳輸視頻流，服務(wù)器來處理再反饋結(jié)果，如果沒有在網(wǎng)絡(luò)，內(nèi)存，CPU上做足夠的優(yōu)化，往往帶來的就是延遲高，響應(yīng)慢。
光看上面文字，大家可能沒什么印象。咱們還是來一張圖，一起來直觀的感受一下耗時(shí)分析

咱們來算算，假設(shè)100個(gè)設(shè)備，每秒鐘30幀的照片，每幀100K，那么每秒鐘有多少流量？每分鐘有多少？每天呢？
按照標(biāo)準(zhǔn)的算法，每個(gè)設(shè)備每秒鐘流量：1*30幀*100KB=3MB
換算到分的話3MB*60秒=16MB/分
1天的話16MB*60分鐘*24小時(shí)=23040MB/天
100個(gè)設(shè)備的話23040MB*100=2T/天，也就是每天有T級(jí)別流量
哇，這么一算，一般的服務(wù)器和網(wǎng)絡(luò)怎么受得了
老規(guī)矩，咱們看圖來分析下現(xiàn)狀

如上圖，照片實(shí)時(shí)上傳到服務(wù)器，服務(wù)器人臉檢測(cè)和特征提取，服務(wù)器特征比對(duì)，排序，結(jié)果輸出。
全部交給服務(wù)器處理，服務(wù)器壓力太了，讓客戶端分擔(dān)點(diǎn)吧 。

優(yōu)化后...


把人臉檢測(cè)和特征提取全放客戶端，客戶端每次上傳人臉特征，服務(wù)端做特征比對(duì)、排序，結(jié)果輸出。