II移動(dòng)互聯(lián)網(wǎng)應(yīng)用多維度體驗(yàn)質(zhì)量評(píng)測(cè)規(guī)范目 次前言 II112范引文件 13語(yǔ)定義 14略語(yǔ) 15測(cè)型 16測(cè)標(biāo) 3功能 3視覺(jué) 3交互 4性能 4系統(tǒng) 5功耗 5網(wǎng)絡(luò) 57測(cè)法 6概述 6權(quán)設(shè)定 6評(píng)計(jì)算 6等評(píng)價(jià) 7參考獻(xiàn) 8PAGEPAGE1移動(dòng)互聯(lián)網(wǎng)應(yīng)用多維度體驗(yàn)質(zhì)量評(píng)測(cè)規(guī)范范圍本文件規(guī)定了移動(dòng)互聯(lián)網(wǎng)應(yīng)用多維度體驗(yàn)質(zhì)量評(píng)測(cè)的評(píng)測(cè)模型、評(píng)測(cè)指標(biāo)、評(píng)測(cè)方法。本文件適用于指導(dǎo)移動(dòng)互聯(lián)網(wǎng)應(yīng)用企業(yè)和軟件評(píng)測(cè)機(jī)構(gòu)對(duì)一般移動(dòng)互聯(lián)網(wǎng)應(yīng)用開(kāi)展基于核心產(chǎn)品（GB/T11457信息技術(shù)軟件工程術(shù)語(yǔ)GB/T11457界定的術(shù)語(yǔ)和定義適用于本文件。縮略語(yǔ)下列縮略語(yǔ)適用于本文件。App：應(yīng)用（Application）CPU（CentralProcessingUnit）OS（OperationSystem）PING（PacketInternetGrope）UI（UserInterface）WiFi：無(wú)線保真（WirelessFidelity）4G：第四代移動(dòng)通信技術(shù)（4thGenerationMobileCommunicationTechnology）5G：第五代移動(dòng)通信技術(shù)（5thGenerationMobileCommunicationTechnology）431圖1移動(dòng)互聯(lián)網(wǎng)應(yīng)用多維度體驗(yàn)質(zhì)量評(píng)測(cè)模型722441——評(píng)估屬性：移動(dòng)互聯(lián)網(wǎng)多維度體驗(yàn)質(zhì)量在某一方面的特征；——評(píng)測(cè)指標(biāo)：移動(dòng)互聯(lián)網(wǎng)應(yīng)用多維度體驗(yàn)質(zhì)量反映在該方面特征表現(xiàn)好壞的具體評(píng)測(cè)項(xiàng)目，對(duì)所有評(píng)估屬性的綜合考察得到軟件的評(píng)測(cè)結(jié)果。表1移動(dòng)互聯(lián)網(wǎng)應(yīng)用多維度體驗(yàn)質(zhì)量評(píng)測(cè)體系序號(hào)一級(jí)評(píng)估屬性二級(jí)評(píng)估屬性定義描述1功能有效性功能是否能夠達(dá)到預(yù)期的結(jié)果，正?？捎脺?zhǔn)確性界面的操作提示信息準(zhǔn)確，用戶是否理解正確成功率多輪次功能測(cè)試中，成功次數(shù)與總測(cè)試次數(shù)的比值2視覺(jué)一致性色彩、字體、圖標(biāo)、彈窗、按鈕、表單等元素等設(shè)計(jì)是否保持風(fēng)格一致清晰度界面圖標(biāo)、圖片、文字等元素是否顯示清晰美觀度界面風(fēng)格、色彩、圖標(biāo)、配圖是否美觀3交互易用性功能操作引導(dǎo)是否清晰、圖標(biāo)寓意是否準(zhǔn)確、提示語(yǔ)是否簡(jiǎn)潔直觀，容易理解，功能操作不猶豫容錯(cuò)性操作錯(cuò)誤時(shí)，系統(tǒng)是否能夠通過(guò)提示和引導(dǎo)快速幫助用戶返回或解決問(wèn)題效率目標(biāo)任務(wù)從開(kāi)始到結(jié)束的操作時(shí)間與點(diǎn)擊次數(shù)4性能啟動(dòng)時(shí)延從桌面點(diǎn)擊APP圖標(biāo)到APP界面完全顯示所需的時(shí)間加載時(shí)延指定功能元素觸發(fā)后，到預(yù)期結(jié)果完整顯示的時(shí)間卡頓次數(shù)每分鐘畫(huà)面發(fā)生卡頓的次數(shù)幀率每秒顯示的畫(huà)面幀數(shù)量5系統(tǒng)兼容性在多種不同型號(hào)的終端上是否能夠顯示正常、功能使用正常穩(wěn)定性長(zhǎng)時(shí)間運(yùn)行時(shí)，出現(xiàn)死機(jī)的頻率6功耗CPU占用率程序長(zhǎng)時(shí)間運(yùn)行過(guò)程中，是否會(huì)出現(xiàn)系統(tǒng)故障或問(wèn)題內(nèi)存使用量運(yùn)行過(guò)程中，對(duì)內(nèi)存的消耗統(tǒng)計(jì)表1移動(dòng)互聯(lián)網(wǎng)應(yīng)用多維度體驗(yàn)質(zhì)量評(píng)測(cè)體系（續(xù)）序號(hào)一級(jí)評(píng)估屬性二級(jí)評(píng)估屬性定義描述6功耗流量消耗移動(dòng)網(wǎng)絡(luò)環(huán)境下，運(yùn)行時(shí)對(duì)流量的消耗統(tǒng)計(jì)電量消耗運(yùn)行過(guò)程中，對(duì)電量的消耗統(tǒng)計(jì)7網(wǎng)絡(luò)PING時(shí)延測(cè)試服務(wù)器指定區(qū)域訪問(wèn)服務(wù)器PING時(shí)延抖動(dòng)測(cè)試服務(wù)器指定區(qū)域訪問(wèn)服務(wù)器抖動(dòng)丟包率測(cè)試服務(wù)器指定區(qū)域訪問(wèn)服務(wù)器丟包率功能有效性有效性的等級(jí)評(píng)測(cè)分為以下2個(gè)等級(jí)：——未通過(guò)：測(cè)試發(fā)現(xiàn)問(wèn)題，且該問(wèn)題會(huì)導(dǎo)致功能無(wú)法正常使用，或達(dá)不到預(yù)期結(jié)果；——通過(guò)：測(cè)試未發(fā)現(xiàn)問(wèn)題，功能使用正?；驕y(cè)試發(fā)現(xiàn)問(wèn)題但不影響功能正常使用，可針對(duì)記錄問(wèn)題。準(zhǔn)確性界面的操作提示信息顯示以及用戶對(duì)信息提醒理解的準(zhǔn)確程度。成功率成功率的評(píng)測(cè)分為以下2個(gè)等級(jí)：——成功：在全部自動(dòng)化測(cè)試任務(wù)中，運(yùn)行正常，未發(fā)現(xiàn)問(wèn)題；——失?。涸谌孔詣?dòng)化測(cè)試任務(wù)中，出現(xiàn)一次及以上運(yùn)行異常，導(dǎo)致任務(wù)終止。視覺(jué)一致性一致性的評(píng)測(cè)分為以下3個(gè)等級(jí)：——優(yōu)：色彩、字體、圖標(biāo)、彈窗、按鈕、表單等界面元素保持設(shè)計(jì)風(fēng)格一致，未發(fā)現(xiàn)問(wèn)題，或發(fā)現(xiàn)極少問(wèn)題；——中：色彩、字體、圖標(biāo)、彈窗、按鈕、表單等界面元素設(shè)計(jì)風(fēng)格基本一致，但有部分問(wèn)題，不影響整體效果；——差：色彩、字體、圖標(biāo)、彈窗、按鈕、表單等界面元素設(shè)計(jì)風(fēng)格有明顯一致性問(wèn)題，整體風(fēng)格不一致。清晰度清晰度的評(píng)測(cè)分為以下3個(gè)等級(jí)：——優(yōu)：界面圖標(biāo)、圖片、文字等元素顯示清晰，未發(fā)現(xiàn)問(wèn)題，或發(fā)現(xiàn)極少問(wèn)題；——中：界面圖標(biāo)、圖片、文字等元素大部分顯示清晰，但有部分問(wèn)題，不影響正常瀏覽；——差：界面圖標(biāo)、圖片、文字等元素明顯不清晰，問(wèn)題較多，影響正常瀏覽。美觀度美觀度的評(píng)測(cè)分為以下3個(gè)等級(jí)：——優(yōu)：界面風(fēng)格、色彩、圖標(biāo)、配圖比較美觀，視覺(jué)舒適，設(shè)計(jì)有特色，未發(fā)現(xiàn)問(wèn)題，或發(fā)現(xiàn)極少問(wèn)題；——中：界面風(fēng)格、色彩、圖標(biāo)、配圖比較普通，設(shè)計(jì)沒(méi)有特色，有部分問(wèn)題；——差：界面風(fēng)格、色彩、圖標(biāo)、配圖明顯不美觀，設(shè)計(jì)粗糙、視覺(jué)雜亂，問(wèn)題較多。交互易用性（——易使用性：功能及界面交互操作簡(jiǎn)單，操作引導(dǎo)清晰，新用戶無(wú)需特殊學(xué)習(xí)即可使用；——易記憶性：功能和界面交互路徑清晰，便于記憶，用戶使用過(guò)后可再次重復(fù)使用，并快速找到界面入口。容錯(cuò)性容錯(cuò)性的評(píng)測(cè)應(yīng)包括以下方面：——節(jié)點(diǎn)容錯(cuò)性：在部分節(jié)點(diǎn)故障后仍能對(duì)外提供服務(wù)的能力。效率效率的評(píng)測(cè)應(yīng)包括以下方面：——任務(wù)完成時(shí)間：目標(biāo)任務(wù)從開(kāi)始到結(jié)束的整體過(guò)程操作時(shí)間；——點(diǎn)擊次數(shù)：目標(biāo)任務(wù)從開(kāi)始到結(jié)束的整體過(guò)程需要用戶點(diǎn)擊的次數(shù)。性能啟動(dòng)時(shí)延的評(píng)測(cè)為從點(diǎn)擊應(yīng)用圖標(biāo)到應(yīng)用主界面完全顯示所需的時(shí)間，通過(guò)采集多輪次自動(dòng)化測(cè)試結(jié)果的數(shù)據(jù)并計(jì)算平均值表示，單位為s。可分為以下3個(gè)等級(jí)：——優(yōu)：＜2s；——中：2s～5s；——差：＞5s。ms——優(yōu)：＜190ms；——中：190ms～250ms；——差：＞250ms?？D次數(shù)的評(píng)測(cè)應(yīng)通過(guò)固定時(shí)間內(nèi)畫(huà)面發(fā)生停頓、延遲的次數(shù)來(lái)表征。其中：——一次卡頓：顯示幀時(shí)間＞前三幀平均耗時(shí)2倍且顯示幀時(shí)間＞兩幀電影幀耗時(shí)；——一次嚴(yán)重卡頓：顯示幀時(shí)間＞前三幀平均耗時(shí)2倍且顯示幀時(shí)間＞三幀電影幀耗時(shí)。幀率系統(tǒng)兼容性兼容性的評(píng)測(cè)應(yīng)包括以下方面：——終端：應(yīng)用在不同終端設(shè)備中運(yùn)行的兼容性，如UI適配、功能適配等；——操作系統(tǒng)：應(yīng)用在不同操作系統(tǒng)或不同版本的操作系統(tǒng)中運(yùn)行的兼容性，包括Android、iOS、HarmonyOS等；——網(wǎng)絡(luò)環(huán)境：應(yīng)用在不同網(wǎng)絡(luò)環(huán)境中運(yùn)行的兼容性，包括4G/5G、WiFi以及弱網(wǎng)環(huán)境等。穩(wěn)定性——系統(tǒng)穩(wěn)定運(yùn)行時(shí)長(zhǎng)：應(yīng)用從開(kāi)始運(yùn)行到首次出現(xiàn)死機(jī)或崩潰的時(shí)間；——穩(wěn)定性通過(guò)率：在指定時(shí)長(zhǎng)內(nèi)，多次運(yùn)行穩(wěn)定性任務(wù)，計(jì)算任務(wù)運(yùn)行通過(guò)的次數(shù)；——穩(wěn)定性失敗次數(shù)：在指定時(shí)長(zhǎng)內(nèi)，由于被測(cè)系統(tǒng)問(wèn)題導(dǎo)致的任務(wù)中斷次數(shù)。功耗CPUCPU占用率以穩(wěn)定運(yùn)行時(shí)CPU的占用情況表示。內(nèi)存使用量的評(píng)測(cè)以穩(wěn)定運(yùn)行時(shí)內(nèi)存的占用情況表示。流量消耗的評(píng)測(cè)穩(wěn)定運(yùn)行時(shí)網(wǎng)絡(luò)帶寬的占用以及后臺(tái)應(yīng)用流量使用情況表示。電量消耗的評(píng)測(cè)在移動(dòng)終端穩(wěn)定運(yùn)行時(shí)的耗電情況表示。網(wǎng)絡(luò)PINGPING抖動(dòng)抖動(dòng)以最大延遲與最小延遲的時(shí)間差表示，抖動(dòng)時(shí)間小，網(wǎng)絡(luò)表征為穩(wěn)定。丟包率丟包率以測(cè)試中所丟失數(shù)據(jù)包數(shù)量占所發(fā)送數(shù)據(jù)組的比率表示。概述權(quán)重設(shè)定一級(jí)評(píng)估屬性的權(quán)重反映了使用機(jī)構(gòu)對(duì)移動(dòng)互聯(lián)網(wǎng)應(yīng)用多維度體驗(yàn)質(zhì)量評(píng)測(cè)的關(guān)注重點(diǎn)，使用機(jī)具體評(píng)測(cè)指標(biāo)的權(quán)重取決于指標(biāo)相對(duì)于相同一級(jí)評(píng)估屬性下其他指標(biāo)的重要性和可實(shí)施性，即指 ??=??×??········································································（1）式中：X—E—F—評(píng)分計(jì)算??=1 ??=（??=1

????×????）/??····························································（2）式中：Y——一級(jí)評(píng)估屬性的評(píng)分值；Pi——該一級(jí)評(píng)估屬性下的第i個(gè)評(píng)測(cè)指標(biāo)的評(píng)分值；Qi——該一級(jí)評(píng)估屬性下的第i個(gè)評(píng)測(cè)指標(biāo)的的權(quán)重；n——該一級(jí)評(píng)估屬性下的評(píng)測(cè)指標(biāo)數(shù)量。得出，即： ??=（

????×????）/??·······················································