mobilerunner技術資料-文庫吧
2025-06-28 20:38 本頁面
【正文】 行智能自動識別，被測設備無需提供特殊接口，無需安裝任何其他應用程序。自動測試的圖像識別原理、過程以及存在的問題錄制時圖像識別原理及過程：（灰圖方差值算法）流程圖流程說明：首先獲取當前操作界面的截圖，獲取當前操作鼠標坐標點，并記錄坐標點的灰度值，然后以當前操作鼠標坐標點為中心向四邊擴大一個像素值得到一個矩形（周圍個像素），判斷該矩形的灰度值與之前的灰度值是否相近，相近則繼續(xù)擴大矩形，直至灰度值差距很大，則認為找到該圖形的邊界，并得到一個矩形的組件截圖。煢楨廣鰳鯡選塊網(wǎng)羈淚鍍齊。執(zhí)行腳本時圖像識別原理：（漢明距離算法、模板匹配算法）流程圖：流程說明：首先獲取當前系統(tǒng)界面并截圖，將該截圖縮放為錄制時界面的大小，在錄制時組件的所在坐標截取組件寬高的子截圖，比較子截圖與組件的相似度（采用漢明距離算法），如果相似度非常高，則認為該界面具有該組件，可以發(fā)送錄制時的操作指令，換算得到的坐標是錄制時的坐標與當前設備相同比例的坐標；如果相似度非常低，則認為該界面不具有該組件，改用直方圖的模板匹配算法，從截圖最左上角到最右下角尋找與錄制時組件形狀相同的界面部分，如果找到相同部分，也認為該界面具有該組件，換算得到的坐標是找到的界面部分的中心點；否則是界面中不具備該組件，無法完成腳本執(zhí)行，判斷腳本執(zhí)行失敗。鵝婭盡損鵪慘歷蘢鴛賴縈詰。 目前存在的問題：). 錄制時組件識別準確度較低，對于邊界不明顯的組件不容易識別，對于分塊的圖形識別也多識別為組件的一部分，不能識別全部組件。但通過資源組件編輯器可以進行人工干預，增強組件識別率?；[叢媽羥為贍僨蟶練淨櫧撻。). 對于不同分辨率比例（如錄制的腳本在的設備上執(zhí)行），執(zhí)行時識別率較低，漢明距離與直方圖模板匹配算法對于比例不匹配的情況識別能力較差。預頌圣鉉儐歲齦訝驊糴買闥。). 相同組件識別時，細微的差別容錯率較差，如同樣的短信圖標，沒有數(shù)量提示的圖標和有數(shù)量提示的圖標程序會認為不是同一個組件。滲釤嗆儼勻諤鱉調硯錦鋇絨。公共資源組件庫與組件特征訓練功能：對于常用的界面組件，可以創(chuàng)建公共資源組件庫，用戶在設計腳本時，可以選擇公共的組件來代替錄制腳本時自動識別的組件，提高腳本的通用性，同時用戶可以上傳新的特征組件，通過特征訓練的方式來增強公共組件的識別率，從而實現(xiàn)類似人工的智能識別。舉例如下：鐃誅臥瀉噦圣騁貺頂廡縫勵。各個輸入法的中英
畢業(yè)設計相關推薦
鄂ICP備17016276號-1