為持續跟蹤和檢測手機銀行APP的兼容性和易用性等方面的表現,為行業發展提供有益參考,中國電子銀行網、和訊網今年再次聯合CFCA兼容和性能測試平臺對18家全國性商業銀行個人手機銀行客戶端進行測試。今年測試範圍首次加入IOS系統,與安卓系統並行測試,測試範圍更為全面。
本次測試內容共分為APP兼容性測試、性能測試以及其他測試三大方面,共8個指標,包括主流手機設備兼容情況、APP啟動時間、CPU佔用率、網絡流量、內存佔用、電量消耗、APP的功能數量和5個典型頁面的平均響應時間。
經測試發現多數手機銀行並未提前適配安卓11 BETA版,同時存在內存佔用在安卓端差距懸殊、流量消耗在不同手機銀行之間差距較大等問題。這說明,銀行在保證功能豐富度、使用便捷度的同時,需要更注重兼容性及性能問題,這將對提升手機銀行用戶體驗有著較為積極的意義。
整體來說,對比近兩年安卓系統版本的數據不難看出,18家手機銀行APP經過一年的努力,兼容性及性能均值數據有明顯提升,啟動時長、內存佔用、耗電量有明顯改善。同時,隨著手機銀行功能的不斷豐富,CPU佔用率和總流量消耗也有一定程度的增加。
由於測試機型和APP版本不同,因此以上數據僅作為參考
在兼容性方面,18家銀行個人手機銀行APP安卓和IOS客戶端整體兼容性表現良好,多數銀行在當前市面流行的主流手機適配測試均測試通過,不存在兼容性問題。
性能方面,18家手機銀行在啟動用戶體驗時間、CPU佔用率、內存佔用、電量消耗、網絡流量和平均頁面響應時長方面表現均良好,各家銀行APP並沒有過多消耗設備資源情況,均在易用性要求範圍內。
但是,在功能列表菜單方面各家銀行差距較大,多的可達180多個功能,少的只有31個功能,體現出各個銀行手機銀行功能展示策略上的不同。
兼容性測試
安卓端App兼容性明顯優於IOS端 但多數銀行均未適配Android 11
在測試的100臺安卓端設備裡,整體兼容性表現良好,可以正常安裝、運行、卸載,且沒有明顯UI問題,個別銀行出現輕微兼容性問題。18家手機銀行中僅有1家手機銀行在華為nova廣告頁面出現顯示不全的UI兼容問題。另一方面,經測試發現78%的全國性銀行手機銀行安卓客戶端未提前進行安卓11 BETA版的適配,在該系統設備中出現啟動閃退,雖然目前不影響客戶體驗和業務開展,但是正式版本發佈在即,手機銀行還需儘快適配。
在IOS客戶端中,13家手機銀行APP在20臺IPHONE設備中未出現兼容性問題,剩餘5家手機銀行出現不兼容較低版本IOS 8系統,在該系統設備中出現啟動閃退或無法安裝。據蘋果公司統計IOS 11以下較低版本的安裝率不足8%,因此基本不影響手機銀行APP的客戶體驗和業務開展。
性能測試
應用啟動用時較去年明顯縮短
根據用戶最佳體驗原則,APP啟動後5秒內完成所有加載達到用戶可操作首頁面體驗最佳,今年18家手機銀行安卓和IOS客戶端APP啟動時間均在5秒以內,明顯優於去年的測試結果(僅有16家手機銀行APP完全加載完成用時在5秒以內),用戶體驗整體有較大改善。
18家手機銀行在安卓端啟動用戶體驗時間分佈在0.687秒到2.97秒之間,差別較小,平均為1.72秒,最大為2.97秒。其中,招商銀行啟動用戶體驗時間最短,從用戶點擊APP圖標到可操作的首頁面完全加載完成僅用時0.687秒。
18家手機銀行在IOS端啟動用戶體驗時間分佈在1.2秒到3.53秒之間,平均為2.35秒,最大為3.53秒。其中,渤海銀行啟動用戶體驗時間最短,從用戶點擊APP圖標到可操作的首頁面完全加載完成用時為1.2秒。
CPU佔用率較去年有一定程度增加
18家銀行安卓和IOS客戶端手機銀行CPU佔用率均在20%以內。在安卓客戶端,APP運行時的CPU佔用率在0.05%到12.07%不等,平均佔用為5.22%,較去年同比增長4.6%, 最高佔用為12.07%。其中,CPU佔用率最低為浙商銀行手機銀行,運行時平均佔用僅為0.05%。
在IOS客戶端,手機銀行APP運行時的CPU佔用率在1.11%到3.96%不等,平均佔用為2.41%,最高佔用為3.96%。其中,CPU佔用率最低為招商銀行手機銀行,運行時平均佔用達1.11%。
內存佔用差距較大
在安卓客戶端,18家手機銀行APP內存佔用差距較大,最大佔用為500M以上,最小佔用為120M,所有銀行APP運行均可順暢運行且不會對設備造成較大資源佔用。內存佔用差距較大,也可體現出不同銀行APP對於內存優化的優劣。而在IOS客戶端的內存佔用,各家銀行APP基本處於統一水平,平均在40M左右。
在安卓客戶端,18家手機銀行APP運行時內存佔用是120.39M到531.81M不等,平均佔用為274.11M,最高佔用為531.81M。其中,最低內存佔用為浙商銀行手機銀行,運行時平均佔用120.39M。
在IOS客戶端,18家手機銀行APP運行時的內存佔用是40.42M到43.09M不等,平均佔用為41.41M,最高佔用為43.09M。其中,最低內存佔用為光大銀行手機銀行,運行時平均佔用40.42M。
流量消耗普遍在可接受範圍內
18家銀行安卓和IOS客戶端APP網絡流量均在可接受範圍內。在安卓客戶端,手機銀行APP運行時2分鐘隨機點擊消耗總流量是0.45KB到157.07KB不等,平均消耗36.65KB,最高為157.07KB。其中,最低流量消耗為民生銀行手機銀行,運行消耗流量0.45KB。
在IOS客戶端,18家手機銀行APP運行時2分鐘隨機點擊消耗總流量280KB到1179.33KB不等,平均消耗652.74KB,最高為1179.33KB。其中。最低流量消耗為恆豐銀行手機銀行,運行消耗流量僅為280KB。
耗電量較去年明顯減少
18家銀行安卓和IOS客戶端APP電量消耗均在可接受範圍內,安卓端耗電量較去年明顯減少。其中,安卓客戶端APP運行時2分鐘隨機點擊消耗總電量2.07毫安到21.4毫安不等,平均消耗5.86毫安,最高消耗為21.4毫安。最低電量消耗是渤海銀行手機銀行,運行消耗2.07毫安。
IOS客戶端APP運行時2分鐘隨機點擊消耗總電量37.88毫安到42.67毫安不等,平均消耗39.97毫安,最高消耗為42.67毫安。最低電量消耗是中國銀行手機銀行,運行消耗37.88毫安。
其他測試
平均頁面響應時間較快
18家銀行安卓和IOS客戶端APP頁面的平均響應時間均在可接受範圍內。安卓客戶端,手機銀行APP“賬戶”、“基金”、“繳費”、“轉賬”和“我的頁面”平均響應時間從0.378秒到1.56秒不等,平均為0.81秒。其中,響應時間最短的是渤海銀行,僅為0.378秒。
在IOS客戶端,手機銀行APP在“我的賬戶”、“轉賬”、“理財”、“信用卡”和“生活頁面”的平均響應時間從0.782秒到2.38秒不等,平均為1.24秒。其中,平均響應時間最短的是郵儲銀行,為0.782秒。
全部功能菜單展示策略大相徑庭
功能菜單數量方面18家銀行差距較大,安卓和IOS客戶端展示的一級功能菜單最多能達到180多個,最少的只有31個,平均功能數量在100個左右。一級功能菜單展示數量也反應手機銀行業運營策略,功能模塊展示多的會導致用戶在搜索上便捷度不足,但功能列表少的也需要用戶多次點擊才能找到具體細項。
安卓客戶端APP全部功能數量從31個到184個不等,平均101個;IOS客戶端APP全部功能數量從31個到185個不等,平均102個。其中,功能列表展示最多的是興業銀行。
測試說明
本次測試包含18家全國性銀行的個人手機銀行安卓和IOS手機客戶端,包括了工商銀行、農業銀行、中國銀行、建設銀行、交通銀行、郵儲銀行、中信銀行、光大銀行、華夏銀行、民生銀行、招商銀行、興業銀行、廣發銀行、平安銀行、浦發銀行、恆豐銀行、浙商銀行、渤海銀行。
測試APP的版本截止於2020年7月1日,各個銀行官網的下載版本。詳細如下:
安卓客戶端:
IOS客戶端:
本次測試共分為APP兼容性測試、性能測試、其他測試三大方面,共8個指標。包括主流手機設備兼容情況、各自APP的功能數量、5個典型頁面的響應時間、APP啟動時間、CPU佔用率、網絡流量、內存佔用、電量消耗。
具體指標解釋如下:
兼容性測試情況覆蓋了100款主流安卓手機、20款IPHONE手機進行。本次測試使用性能測試環境安卓端華為P40 PRO,安卓系統版本10.0,IOS端為iphone7plus IOS系統版本為11.4.1。網絡環境為CFCA測試WIFI(中國電信網絡)連接。測試過程中系統無其他APP後臺運行,被測試銀行手機銀行APP在無其他APP干擾情況下冷啟動開始測試,測試過程採取隨機測試,測試時長大約2到3分鐘。
本次測試兼容性情況使用設備分佈情況如下:
安卓客戶端:
IOS客戶端: