隨著信息技術(shù)的高速發(fā)展,移動(dòng)應(yīng)用與人們生活日益緊密,面向各類場(chǎng)景的應(yīng)用層出不窮,什么樣的應(yīng)用更受用戶青睞呢?在滿足用戶功能需求之上,一個(gè)好的應(yīng)用要能運(yùn)行穩(wěn)定、流暢不卡頓、占用內(nèi)存小、安全等級(jí)高,此外,最好還能提供更多創(chuàng)新便捷的附加能力。
為了匹配用戶的期望,應(yīng)用開發(fā)者們自開發(fā)階段到上架之前,均在持續(xù)進(jìn)行應(yīng)用測(cè)試。在每個(gè)測(cè)試階段,開發(fā)者們都有不同的測(cè)試目標(biāo)。
HarmonyOS應(yīng)用測(cè)試工程
在開發(fā)自測(cè)階段,需要保障應(yīng)用基本可用;功能測(cè)試階段,需要應(yīng)用功能完整,實(shí)現(xiàn)用戶目的;在專項(xiàng)測(cè)試中,則以為用戶提供更好的體驗(yàn)為目標(biāo),通過(guò)多維度測(cè)試(如安全、性能功耗、穩(wěn)定性等),持續(xù)跟蹤應(yīng)用質(zhì)量指標(biāo);直至最后滿足HarmonyOS應(yīng)用測(cè)試標(biāo)準(zhǔn),方可上架發(fā)布。
在這個(gè)過(guò)程中,專項(xiàng)測(cè)試是否充分,各項(xiàng)領(lǐng)域是否全面,決定了應(yīng)用在測(cè)試驗(yàn)收環(huán)節(jié)能否通過(guò)各項(xiàng)檢測(cè)指標(biāo)和高質(zhì)量的交付,最終成為用戶喜愛的應(yīng)用。
一
為什么會(huì)有專項(xiàng)測(cè)試?
對(duì)于普通應(yīng)用開發(fā)團(tuán)隊(duì)而言,開展應(yīng)用專項(xiàng)的測(cè)試,往往存在諸多難點(diǎn)。不同的專項(xiàng)領(lǐng)域測(cè)試,環(huán)境要求不同,測(cè)試工程師需要具備相應(yīng)的測(cè)試技能也不同,這意味著測(cè)試執(zhí)行需要投入較大的成本。測(cè)試執(zhí)行結(jié)束后,對(duì)測(cè)試數(shù)據(jù)進(jìn)一步挖掘,深度分析等,同樣也非常依賴測(cè)試工程師的專業(yè)度。DevEco Testing讓應(yīng)用專項(xiàng)測(cè)試,變得更簡(jiǎn)單、更專業(yè)、更智能!通過(guò)將專業(yè)測(cè)試服務(wù)化,既省去了環(huán)境搭建過(guò)程,也降低了測(cè)試門檻,專項(xiàng)測(cè)試不再局限于測(cè)試人員,開發(fā)人員也可以將應(yīng)用測(cè)試前置,在開發(fā)階段就能進(jìn)行自測(cè),隨時(shí)開發(fā)隨時(shí)測(cè)試,最終實(shí)現(xiàn)測(cè)試前移的目的。
DevEco Testing能力圖
二
穩(wěn)定性測(cè)試常見痛點(diǎn)
下面以穩(wěn)定性測(cè)試為例,展開解讀DevEco Testing專項(xiàng)測(cè)試能力。經(jīng)調(diào)查統(tǒng)計(jì),在Top100應(yīng)用中,每個(gè)應(yīng)用平均包含200+個(gè)頁(yè)面,800+條業(yè)務(wù)路徑。當(dāng)下應(yīng)用開發(fā)的版本迭代快,上線周期短,留給測(cè)試環(huán)節(jié)的時(shí)間往往被壓縮,測(cè)試團(tuán)隊(duì)想在短時(shí)間內(nèi)完成穩(wěn)定性測(cè)試,將面臨很大的挑戰(zhàn)。如果要高質(zhì)量的執(zhí)行應(yīng)用穩(wěn)定性測(cè)試,意味著測(cè)試工作要覆蓋到應(yīng)用的每一個(gè)頁(yè)面、每一個(gè)業(yè)務(wù)場(chǎng)景、甚至每一條遍歷路徑,這個(gè)過(guò)程中工作量無(wú)法衡量。
面對(duì)這種情況,常見的做法是引入Monkey技術(shù),通過(guò)無(wú)目的的隨機(jī)點(diǎn)擊,觸發(fā)一些異常場(chǎng)景,嘗試發(fā)現(xiàn)應(yīng)用中的穩(wěn)定性相關(guān)的Bug。但這種方法缺點(diǎn)也很明顯,很多測(cè)試時(shí)長(zhǎng)都浪費(fèi)在了無(wú)意義的操作上,面對(duì)特殊場(chǎng)景比如彈窗、登錄頁(yè)面等,效率很低甚至無(wú)法覆蓋。
三
DevEco Testing-有智慧的探索測(cè)試
此前,DevEco Testing提供的穩(wěn)定性測(cè)試服務(wù),相較于普通的Monkey工具,遍歷算法&策略更加高效智能,不僅減少了無(wú)效遍歷操作及循環(huán)處理時(shí)間,還能同時(shí)處理彈框、鎖屏等20+特殊場(chǎng)景,遍歷效率得到大幅提升。但面對(duì)應(yīng)用特有的業(yè)務(wù)場(chǎng)景(如購(gòu)物類應(yīng)用,立即購(gòu)買-確認(rèn)支付),仍無(wú)法實(shí)現(xiàn)全量覆蓋。這一次DevEco Testing穩(wěn)定性測(cè)試方案再升級(jí),有智慧的探索測(cè)試正式發(fā)布。在基于專家經(jīng)驗(yàn)的智能AI加持下,探索測(cè)試實(shí)現(xiàn)了場(chǎng)景感知、語(yǔ)義分析。
在以下測(cè)試實(shí)例中,我們可以看到,DevEco Testing通過(guò)對(duì)應(yīng)用界面上的控件在進(jìn)行實(shí)時(shí)的語(yǔ)義分析,推斷出每個(gè)控件代表的具體含義(分類、訂單、添加、支付),結(jié)合對(duì)場(chǎng)景的智能感知,識(shí)別出當(dāng)前正在對(duì)購(gòu)物場(chǎng)景進(jìn)行測(cè)試,據(jù)此生成對(duì)應(yīng)的測(cè)試意圖,如瀏覽商品、購(gòu)物車結(jié)算等,驅(qū)動(dòng)測(cè)試高效執(zhí)行。
探索測(cè)試執(zhí)行
此外,還通過(guò)應(yīng)用測(cè)試數(shù)據(jù)建模,借助智能AI對(duì)場(chǎng)景識(shí)別及遍歷動(dòng)作持續(xù)訓(xùn)練,完善應(yīng)用特征圖譜,使得業(yè)務(wù)模型、節(jié)點(diǎn)特征等越來(lái)越豐富。
四
遍歷效率顯著提升
在DevEco Testing一個(gè)測(cè)試驗(yàn)證的實(shí)例中,探索測(cè)試首次遍歷頁(yè)面15+個(gè),遍歷路徑25+條;當(dāng)前第10輪測(cè)試時(shí),已經(jīng)可以覆蓋54個(gè)頁(yè)面,63條路徑。隨著測(cè)試數(shù)據(jù)的積累,智能AI持續(xù)自主地進(jìn)行路徑探索和學(xué)習(xí),推動(dòng)應(yīng)用搜索測(cè)試引擎實(shí)現(xiàn)越測(cè)越聰明、越測(cè)越高效。(注:數(shù)據(jù)來(lái)源于DevEco Testing實(shí)驗(yàn)室統(tǒng)計(jì)數(shù)據(jù))遍歷效率提升
五
增強(qiáng)版的故障識(shí)別
同時(shí),探索測(cè)試提供了增強(qiáng)版的故障識(shí)別能力。除了支持識(shí)別系統(tǒng)預(yù)級(jí)別的故障(如crash、JS error、App freeze等等)還支持用戶根據(jù)業(yè)務(wù)特征自定義故障,如文本故障、圖片故障,可應(yīng)用在多類應(yīng)用測(cè)試場(chǎng)景中。對(duì)于識(shí)別到的故障,DevEco Testing提供了概要信息及定位日志,幫助開發(fā)者進(jìn)一步分析定位。自定義故障類型
六
應(yīng)用質(zhì)量透視分析
與過(guò)往故障分析不同,探索測(cè)試提供了更高階的分析能力。故障數(shù)據(jù)以熱力圖形式展現(xiàn),可快速識(shí)別高頻故障路徑;支持缺陷密度對(duì)比,可針對(duì)性優(yōu)化故障節(jié)點(diǎn),重點(diǎn)投入故障頻發(fā)的模塊;提供故障-路徑-報(bào)告關(guān)聯(lián)能力,可大幅提升問(wèn)題定位效率;支持故障分類匯總,幫助研發(fā)人員構(gòu)建應(yīng)用的專屬故障特征庫(kù)。從時(shí)間維度回放,可對(duì)應(yīng)用的質(zhì)量作更進(jìn)一步透視分析,整體趨勢(shì)一目了然!故障透視分析
七
結(jié)束語(yǔ)
除了穩(wěn)定性測(cè)試外,DevEco Testing還提供了應(yīng)用撥測(cè)、性能測(cè)試、安全測(cè)試、應(yīng)用標(biāo)準(zhǔn)測(cè)試等其他應(yīng)用專項(xiàng)測(cè)試能力,為開發(fā)自測(cè)試-集成測(cè)試-上架測(cè)試提供了一站式測(cè)試服務(wù),幫助應(yīng)用團(tuán)隊(duì)輕松應(yīng)對(duì)應(yīng)用測(cè)試全場(chǎng)景,助力打造HarmonyOS高品質(zhì)應(yīng)用。更多應(yīng)用測(cè)試解決方案即將上線,敬請(qǐng)期待!
-
HarmonyOS
+關(guān)注
關(guān)注
79文章
1978瀏覽量
30269
原文標(biāo)題:【技術(shù)視界】玩轉(zhuǎn)HarmonyOS專項(xiàng)測(cè)試,輕松上架“五星”高品質(zhì)應(yīng)用
文章出處:【微信號(hào):HarmonyOS_Dev,微信公眾號(hào):HarmonyOS開發(fā)者】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
評(píng)論