基於HTML5+tracking.js,刷臉支付的實現

最近刷臉支付很火,老闆們當然要追趕時代潮流,於是就有了刷臉支付這個項目。前端實現關鍵的技術是

攝像頭錄像拍照人臉比對,本文來探討一下如何在html5環境中如何實現刷臉支付以及開發過程中遇到的問題。

1.攝像頭

1.1 input獲取攝像頭

html5中獲取手機上的圖片,有兩種方式,使用input,如下可以打開攝像頭拍照:

<code>/<code>

另外如果想打開相冊,可以這樣:

<code>/<code>

但是這兩種方式都會有兼容性問題,用過的同學可能都知道。

1.2 getUserMedia獲取攝像頭

getUserMedia是html5一個新的api,官方一點的定義是:

MediaDevices.getUserMedia() 會提示用戶給予使用媒體輸入的許可,媒體輸入會產生一個MediaStream,裡面包含了請求的媒體類型的軌道。此流可以包含一個視頻軌道(來自硬件或者虛擬視頻源,比如相機、視頻採集設備和屏幕共享服務等等)、一個音頻軌道(同樣來自硬件或虛擬音頻源,比如麥克風、A/D轉換器等等),也可能是其它軌道類型。

簡單一點說就是可以獲取到用戶攝像頭。

同上面input一樣,這種方式也有兼容性問題,不過可以使用其他方式解決,這裡可以參考MediaDevices.getUserMedia(),文檔中有介紹"在舊的瀏覽器中使用新的API"。我這裡在網上也找了一些參考,總結出一個相對全面的getUserMedia版本,代碼如下:

<code>// 訪問用戶媒體設備
getUserMedia(constrains, success, error) {
if (navigator.mediaDevices.getUserMedia) {
//最新標準API
navigator.mediaDevices.getUserMedia(constrains).then(success).catch(error);
} else if (navigator.webkitGetUserMedia) {
//webkit內核瀏覽器
navigator.webkitGetUserMedia(constrains).then(success).catch(error);
} else if (navigator.mozGetUserMedia) {
//Firefox瀏覽器
navagator.mozGetUserMedia(constrains).then(success).catch(error);
} else if (navigator.getUserMedia) {
//舊版API
navigator.getUserMedia(constrains).then(success).catch(error);
} else {
this.scanTip = "你的瀏覽器不支持訪問用戶媒體設備"
}
}/<code>

1.3 播放視屏

獲取設備方法有兩個回調函數,一個是成功,一個是失敗。成功了就開始播放視頻,播放視屏其實就是給video設置一個url,並調用play方法,這裡設置url要考慮不同瀏覽器兼容性,代碼如下:

<code>success(stream) {
this.streamIns = stream
// 設置播放地址,webkit內核瀏覽器
this.URL = window.URL || window.webkitURL
if ("srcObject" in this.$refs.refVideo) {
this.$refs.refVideo.srcObject = stream
} else {
this.$refs.refVideo.src = this.URL.createObjectURL(stream)
}
this.$refs.refVideo.onloadedmetadata = e => {
// 播放視頻
this.$refs.refVideo.play()
this.initTracker()
}
},
error(e) {
this.scanTip = "訪問用戶媒體失敗" + e.name + "," + e.message
}/<code>

注意:

  1. 播放視屏方法最好寫在onloadmetadata回調函數中,否則可能會報錯。
  2. 播放視頻的時候出於安全性考慮,必須在本地環境中測試,也就是http://localhost/xxxx中測試,或者帶有https://xxxxx環境中測試,不然的話或有跨域問題。
  3. 下面用到的initTracker()方法也好放在這個onloadedmetadata回調函數里,不然也會報錯。

2. 捕捉人臉

2.1 使用tracking.js捕捉人臉

視屏在video中播放成功之後就開始識別人臉了,這裡使用到一個第三方的功能tracking.js,是國外的大神寫的JavaScript圖像識別插件。關鍵代碼如下:

<code>// 人臉捕捉
initTracker() {
this.context = this.$refs.refCanvas.getContext("2d") // 畫布
this.tracker = new tracking.ObjectTracker(['face']) // tracker實例
this.tracker.setStepSize(1.7) // 設置步長
this.tracker.on('track', this.handleTracked) // 綁定監聽方法
try {
tracking.track('#video', this.tracker) // 開始追蹤
} catch (e) {
this.scanTip = "訪問用戶媒體失敗,請重試"
}
}/<code>

捕獲到人臉之後,可以在頁面上用一個小方框標註出來,這樣有點交互效果。

<code>// 追蹤事件
handleTracked(e) {
if (e.data.length === 0) {
this.scanTip = '未檢測到人臉'
} else {
if (!this.tipFlag) {
this.scanTip = '檢測成功,正在拍照,請保持不動2秒'
}
// 1秒後拍照,僅拍一次
if (!this.flag) {
this.scanTip = '拍照中...'
this.flag = true
this.removePhotoID = setTimeout(() => {
this.tackPhoto()
this.tipFlag = true
}, 2000)
}
e.data.forEach(this.plot)
}
}/<code>

在頁面中畫一些方框,標識出人臉:

<code>
:style="{ width: item.width + 'px', height: item.height + 'px', left: item.left + 'px', top: item.top + 'px'}">
/<code>
<code>// 繪製跟蹤框
plot({x, y, width: w, height: h}) {
// 創建框對象
this.profile.push({ width: w, height: h, left: x, top: y })
}/<code>

2.2 拍照

拍照,就是使用video作為圖片源,在canvas中保存一張圖片下來,注意這裡使用toDataURL方法的時候可以設置第二個參數quality,從0到1,0表示圖片比較粗糙,但是文件比較小,1表示品質最好。

<code>// 拍照
tackPhoto() {
this.context.drawImage(this.$refs.refVideo, 0, 0, this.screenSize.width, this.screenSize.height)
// 保存為base64格式
this.imgUrl = this.saveAsPNG(this.$refs.refCanvas)
// this.compare(imgUrl)
this.close()
},
// Base64轉文件
getBlobBydataURI(dataURI, type) {
var binary = window.atob(dataURI.split(',')[1]);
var array = [];
for(var i = 0; i < binary.length; i++) {
array.push(binary.charCodeAt(i));
}
return new Blob([new Uint8Array(array)], {
type: type
});
},
// 保存為png,base64格式圖片
saveAsPNG(c) {
return c.toDataURL('image/png', 0.3)
}/<code>

拍照完成之後就可以把文件發送給後端,讓後端進行對比驗證,這裡後端使用的是阿里雲的接口。

3. 最後效果

3.1 參考代碼demo

最後,demo我已經放在github上了,感興趣可以打開看一下。

效果如下:

基於HTML5+tracking.js,刷臉支付的實現

3.2 在項目中落地

最後放在項目中,無非就是最後一個步驟,去調用接口比對,根據比對結果成功是成功還是失敗,決定是人臉支付還是繼續使用原來的密碼支付,效果如下:

基於HTML5+tracking.js,刷臉支付的實現

ps:這裡人臉比對失敗了,是因為我帶著口罩,就不呲牙露臉了。

作者:Tyler Ning 出處:http://www.cnblogs.com/tylerdonet/ 本文版權歸作者和博客園共有,歡迎轉載,但未經作者同意必須保留此段聲明,且在文章頁面明顯位置給出原文連接,如有問題,可以通過以下郵箱地址[email protected] 聯繫我,非常感謝。


分享到:


相關文章: