mobilerunner技術(shù)資料-文庫(kù)吧
2025-06-28 20:38 本頁(yè)面
【正文】 行智能自動(dòng)識(shí)別，被測(cè)設(shè)備無(wú)需提供特殊接口，無(wú)需安裝任何其他應(yīng)用程序。自動(dòng)測(cè)試的圖像識(shí)別原理、過(guò)程以及存在的問(wèn)題錄制時(shí)圖像識(shí)別原理及過(guò)程：（灰圖方差值算法）流程圖流程說(shuō)明：首先獲取當(dāng)前操作界面的截圖，獲取當(dāng)前操作鼠標(biāo)坐標(biāo)點(diǎn)，并記錄坐標(biāo)點(diǎn)的灰度值，然后以當(dāng)前操作鼠標(biāo)坐標(biāo)點(diǎn)為中心向四邊擴(kuò)大一個(gè)像素值得到一個(gè)矩形（周?chē)鷤€(gè)像素），判斷該矩形的灰度值與之前的灰度值是否相近，相近則繼續(xù)擴(kuò)大矩形，直至灰度值差距很大，則認(rèn)為找到該圖形的邊界，并得到一個(gè)矩形的組件截圖。煢楨廣鰳鯡選塊網(wǎng)羈淚鍍齊。執(zhí)行腳本時(shí)圖像識(shí)別原理：（漢明距離算法、模板匹配算法）流程圖：流程說(shuō)明：首先獲取當(dāng)前系統(tǒng)界面并截圖，將該截圖縮放為錄制時(shí)界面的大小，在錄制時(shí)組件的所在坐標(biāo)截取組件寬高的子截圖，比較子截圖與組件的相似度（采用漢明距離算法），如果相似度非常高，則認(rèn)為該界面具有該組件，可以發(fā)送錄制時(shí)的操作指令，換算得到的坐標(biāo)是錄制時(shí)的坐標(biāo)與當(dāng)前設(shè)備相同比例的坐標(biāo)；如果相似度非常低，則認(rèn)為該界面不具有該組件，改用直方圖的模板匹配算法，從截圖最左上角到最右下角尋找與錄制時(shí)組件形狀相同的界面部分，如果找到相同部分，也認(rèn)為該界面具有該組件，換算得到的坐標(biāo)是找到的界面部分的中心點(diǎn)；否則是界面中不具備該組件，無(wú)法完成腳本執(zhí)行，判斷腳本執(zhí)行失敗。鵝婭盡損鵪慘歷蘢鴛賴(lài)縈詰。 目前存在的問(wèn)題：). 錄制時(shí)組件識(shí)別準(zhǔn)確度較低，對(duì)于邊界不明顯的組件不容易識(shí)別，對(duì)于分塊的圖形識(shí)別也多識(shí)別為組件的一部分，不能識(shí)別全部組件。但通過(guò)資源組件編輯器可以進(jìn)行人工干預(yù)，增強(qiáng)組件識(shí)別率。籟叢媽羥為贍僨蟶練淨(jìng)櫧撻。). 對(duì)于不同分辨率比例（如錄制的腳本在的設(shè)備上執(zhí)行），執(zhí)行時(shí)識(shí)別率較低，漢明距離與直方圖模板匹配算法對(duì)于比例不匹配的情況識(shí)別能力較差。預(yù)頌圣鉉儐歲齦訝驊糴買(mǎi)闥。). 相同組件識(shí)別時(shí)，細(xì)微的差別容錯(cuò)率較差，如同樣的短信圖標(biāo)，沒(méi)有數(shù)量提示的圖標(biāo)和有數(shù)量提示的圖標(biāo)程序會(huì)認(rèn)為不是同一個(gè)組件。滲釤嗆儼勻諤鱉調(diào)硯錦鋇絨。公共資源組件庫(kù)與組件特征訓(xùn)練功能：對(duì)于常用的界面組件，可以創(chuàng)建公共資源組件庫(kù)，用戶(hù)在設(shè)計(jì)腳本時(shí)，可以選擇公共的組件來(lái)代替錄制腳本時(shí)自動(dòng)識(shí)別的組件，提高腳本的通用性，同時(shí)用戶(hù)可以上傳新的特征組件，通過(guò)特征訓(xùn)練的方式來(lái)增強(qiáng)公共組件的識(shí)別率，從而實(shí)現(xiàn)類(lèi)似人工的智能識(shí)別。舉例如下：鐃誅臥瀉噦圣騁貺頂廡縫勵(lì)。各個(gè)輸入法的中英
畢業(yè)設(shè)計(jì)相關(guān)推薦
鄂ICP備17016276號(hào)-1