最近幾年APP專項測試越來越受大家關注,作為一個CNAS資質中間服務商如何出具一份合格的CNAS檢測報告至關重要,下面來重點說一下APP專項測試及檢測報告。
除了APP的UI功能測試、兼容性測試(APP適配)、安全測試、穩定性測試(monkey)等測試類型外,APP專項測試也是廣大企業和個人APP開發者比較關注的,測試內容主要包括耗電量測試、流量測試、弱網測試、CPU利用率測試、內存利用率測試、UI頁面卡頓測試、響應時間、體驗性、崩潰概率。其中弱網測試主要模擬運營商移動、聯通、電信接入點測試(需要使用實際SIM卡)等弱網環境下,APP在手機終端的延遲和丟包、APP閃退、ANR、數據丟失情況。
APP專項測試需求提測背景
缺陷評級說明
致命:程序無法正常運行或程序無法跑通、無法正常啟動、異常退出、Crash、資源不足、死循環、崩潰或嚴重資源不足等
嚴重:核心功能無法完成、功能報錯、數據錯誤等,但不會影響程序運行
一般:一般功能性Bug,產品中的不符合產品需求或用戶使用的缺陷
UI:操作不方便,布局不合理等一類的易用性相關的缺陷
建議:對產品的改進優化型建議
測試結果數據分析
不可使用純文字描述此部分,可以用線圖、餅圖、柱形圖都可以,可視化的圖表形式是最佳選擇、表現形式最強,更能突出測試的結果數據,這才是企業和個人APP開發者比較關注的。嚴格來說,每一份的數據報告都必定會包含大部分的文字和數字組成,但你是否能保證提交這樣黑紙白字、烏壓壓的報告文檔,企業領導能日理萬機之余來沉心靜氣的閱讀完畢?當然,出具的檢測報告還有截取手機各種界面出錯的圖片。但是每一次的偶發性,這種單一概率性的圖片,又能生動形象說明測試數據的結論嗎?沒關系,我們會為企業提供一份數據可視化的CNAS檢測報告。
問題出現模塊數據統計
問題統計描述,風險等級評估,高風險處用鮮艷顏色標注
問題統計描述,需具備“測試設備”、“網絡”、“前提條件”、“測試步驟”、“期望結果”、“實際結果”、“備注”、“問題截圖/截屏”、“復現率”等詳細測試條件。
缺陷結論
結論中對遺留問題、修改建議、缺陷覆蓋率,各專項測試技術指標挨個結果分析,對存在的風險提出合理的規避方法。