為了持續跟蹤檢測手機銀行APP的兼容性和可用性性能,為行業發展提供有益參考,CFCA兼容性和性能測試平臺對20家農村商業銀行的客戶端進行了測試。經測試發現,20家農商行APP Android和IOS客戶端整體兼容性良好,大部分銀行通過了目前市場流行的主流手機適配測試。在IOS客戶端上,20家農商行手機銀行的性能數據得到了明顯的優化,對於提升手機銀行的用戶體驗會有更積極的意義。
對比Android系統近兩年的性能數據,不難看出,經過壹年的努力,20家農商行手機銀行app的部分性能指標有所提升,其中兼容性和總流量消耗提升最為明顯。另壹方面,隨著農村商業銀行功能的不斷豐富,視頻、圖片等功能的增強,在用戶體驗時間、內存占用、功耗等方面的性能消耗呈現增長趨勢。對比IOS系統版本近兩年的性能數據,除兼容性和內存占用外,其他性能指標均有優化和提升。
安卓系統:
(由於測試型號和APP版本不同,以上數據僅供參考。)
IOS系統:
(由於測試型號和APP版本不同,以上數據僅供參考。)
兼容性測試
80%的手機銀行app沒有提前適配Android 12 BETA。
在測試的100安卓設備中,整體兼容性能良好,可以正常安裝、操作和卸載,沒有明顯的UI問題。15%的手機銀行存在部分機型頁面顯示不完整等兼容性問題。在鴻蒙系統2.0.0系統中,所有20款手機銀行應用都能流暢運行。此外,在測試Android 12測試版兼容性時,農商行手機銀行的Android客戶端有80%沒有提前適配,啟動閃退,系統設備出現故障。只有四家銀行沒有發現任何兼容性問題。今年5月19發布正式版,手機銀行需要盡快適應。
在IOS客戶端,20款農商行app的20臺IPHONE設備中,15銀行不存在兼容問題,整體兼容性能良好,可以正常安裝、運行、卸載,沒有明顯UI問題。
特性試驗
應用程序啟動用戶體驗所需時間的最大差異可超過5倍。
根據用戶最佳體驗原則,今年測試的20家農商行中,85%的手機銀行app在啟動後5秒內完成全部加載,達到用戶可操作主頁體驗最佳標準,3家銀行未能達到該原則。其中,Android上有3款銀行app啟動時間超過5秒,IOS上只有1款銀行app啟動時間超過5秒。總體來說,今年的評測結果與去年基本持平(去年85%的手機銀行app在最佳體驗時間內加載完畢),用戶體驗時間有待提升。
在Android客戶端上,20家農商行的啟動用戶體驗時間從1.76秒到9.85秒不等,差異較大,平均為3.67秒,明顯高於去年的2.56秒,中位數為3.40秒,最大為9.85秒。其中,深圳農商銀行手機銀行APP的用戶體驗最短,從用戶點擊APP圖標到可操作首頁完全加載,僅用時1.76秒。
在IOS客戶端上,20家農商行的啟動用戶體驗時間從0.82秒到11.3秒不等,平均2.39秒,遠高於去年的2.77秒,中位數為1.82秒,最高為11.3秒。其中,成都農商手機銀行APP啟動用戶體驗的時間最短,從用戶點擊APP圖標到可操作首頁滿載,耗時0.82秒。
CPU利用率在7%以內
20家農商行Android和IOS客戶端APP CPU占用率均在7%以內。在Android客戶端上,APP運行的CPU利用率在0.106%到6.234%之間,平均值為2.71%,比去年下降了7.19%,中位數為2.497%,最大值為6.234%。其中,四川農信手機銀行APP CPU占用率最低,運行時平均占用率僅為0.106%。
在IOS客戶端,手機銀行APP的CPU利用率從0.5%到1.37%不等,平均值為0.91%,中位數為0.87%,最大值為1.37%。其中CPU使用率最低的是山東農信手機銀行APP,運行時平均占用率為0.5%。
各行內存占用的差距在逐漸縮小。
20個農商行app在Android客戶端的內存占用存在壹定差距,差距最多在2.5倍左右,但銀行之間的差距在逐年減小,內存占用差距也能反映出不同銀行app對於內存優化的優劣。在IOS客戶端的內存占用上,各銀行app基本處於統壹水平,平均在28MB左右,各銀行app都能流暢運行,不會對設備造成較大的資源占用。
在Android客戶端上,20家農商行app的內存占用從163.07MB到430.32MB不等,平均占用268.07MB,中位數263.79MB,最大占用430.32MB,其中內存占用最低的是成都農商行手機銀行,運行時平均占用163.07MB。
在IOS客戶端,20家農商行APP的內存占用從28.06MB到30.64MB不等,差距不大,平均占用28.55MB,中位數28.42MB,最大占用30.64MB,其中內存占用最小的是昆山農商行手機銀行APP,運行時平均占用28.06MB。
流量消耗明顯提升,安卓平均消耗不到10KB。
20家農商行Android和IOS客戶端APP網絡流量總體在可接受範圍內,與去年同期數據相比,流量消耗下降明顯。在Android客戶端上,手機銀行APP運行時隨機點擊2分鐘消耗的總流量在0.391KB到33.309KB之間,平均消耗9.295KB,比去年多67.57KB,性能比去年高7倍以上,中位數為3.818KB,最高為33.309KB..其中山東農信手機銀行APP流量消耗最低,運行時流量消耗僅為0.391KB。
在IOS客戶端,隨機點擊2分鐘,20個農商行app的總流量消耗在128KB到1991KB之間,平均消耗968.4KB,比去年的2376KB好很多,中位數為1039.5KB,最高為1965438。其中,流量消耗最低的是江西農商行手機銀行APP,操作流量消耗僅為128KB。
Android的平均功耗比去年翻了壹番。
20家農村商業銀行的Android和IOS客戶端app功耗均在可接受範圍內,Android平均功耗較去年增長近壹倍。其中,隨機點擊安卓客戶端APP分鐘的總功耗在2.29mA-28 mA之間,平均功耗為6.091 mA,是去年的近兩倍,中位數為4.525 mA,最大功耗為28ma。功耗最低的是江陰農商手機銀行APP,操作功耗只有2.29 mA。
IOS客戶端APP運行2分鐘,總功耗從36.1毫安到41.25毫安不等,平均功耗38.53毫安,中位數38.22毫安,最大功耗41.25毫安。功耗最低的是江西農商銀行手機銀行APP,操作功耗為36.1 mA。
其他測試
每壹行APP的平均頁面響應時間提升在1.5秒以內。
20家農商行在Android和IOS客戶端APP頁面的平均響應時間更快。在安卓客戶端上,手機銀行APP“賬戶”、“理財產品”、“支付”、“轉賬”、“我的頁面”的平均響應時間從0.21秒到1.1秒不等,平均0.45秒,中位數0.39秒,最慢1.60秒。其中,響應時間最短的是雲南農信手機銀行APP,僅為0.21秒。
在IOS客戶端,手機銀行APP在我的賬戶、轉賬、金融、信用卡、生活頁面的平均響應時間從0.568秒到1.206秒不等,平均值為0.85秒,中位數為0.84秒。其中,平均響應時間最短的是成都農商手機銀行APP,為0.568秒。
試驗規格
本次測試包括20家農商行的個人手機銀行Android和IOS手機客戶端。包括北京農村商業銀行、上海農村商業銀行、張家港農村商業銀行、常熟農村商業銀行、成都農村商業銀行、深圳農村商業銀行、江陰農村商業銀行、無錫農村商業銀行、江西農村商業銀行、廣州農村商業銀行、蘇州農村商業銀行、重慶農村商業銀行、昆山農村商業銀行、寧波鄞州農村商業銀行、浙江農村信用合作聯社、安徽農村信用合作聯社、山東農村信用合作聯社、四川農村信用合作聯社。(銀行按順序隨機排列)
測試APP版本截止5月31,2021,官網各銀行下載版本。詳情如下:
Android客戶端(版本列表隨機排列):
IOS客戶端(版本列表隨機排列):
本次測試* * *分為APP兼容性測試、性能測試、其他測試三大方面,7項指標。包括主流手機設備的兼容性、APP用戶體驗的啟動時間、CPU占用率、網絡流量、內存占用率、耗電量、五個典型頁面的響應時間。
具體指標解釋如下:
兼容性測試覆蓋100款主流安卓手機和20款IPHONE手機。本次測試使用的性能測試環境為Android端華為P40 PRO,Android系統版本10,iOS端iPhone 11 Pro Max,IOS系統版本13.3.1。網絡環境是CFCA測試WIFI(中國電信網)連接。測試過程中,後臺沒有其他APP運行,被測銀行的手機銀行APP冷啟動測試,不受其他APP幹擾。測試過程隨機,測試時長約為2至3分鐘。
本試驗中使用的設備分布如下:
Android客戶端:
IOS客戶端: