基于界面對象識別的制造業(yè)軟件交互式集成技術(shù).pdf

1、制造業(yè)信息化軟件為實現(xiàn)通用化，往往被設(shè)計成需要用戶進行多次、反復(fù)的基本操作來完成綜合性的功能，效率低下且容易出錯；軟件信息孤島問題突出，導(dǎo)致軟件集成需求不斷增加，但由于軟件設(shè)計或商業(yè)原因，許多軟件缺乏二次開發(fā)接口而難以集成，目前對集成的研究主要著眼于集成理論和體系架構(gòu)的研究，對底層的交互集成研究不足。因此，迫切需要一種良好的手段來解決上述繁雜操作和軟件交互集成手段缺乏的問題。
　　 開目自動化平臺已在一定程度上解決了上述問題，但

2、它對部分非標(biāo)準(zhǔn)軟件無法進行操控，應(yīng)用范圍有限。本文對開目自動化平臺進行了應(yīng)用與功能擴充，形成用戶界面自動化操控平臺(UIAOP)。根據(jù)實際需求給出了單一軟件、系統(tǒng)集成、平臺集成三種應(yīng)用模式，進而根據(jù)人工操控圖形界面(GUI)和字符界面(CUI)軟件的流程，完成平臺需求分析、功能模塊劃分、功能映射與體系架構(gòu)設(shè)計，給出了各模塊的具體實現(xiàn)方案。
　　 對GUI軟件，界面對象的識別與操控是關(guān)鍵。本文采用基于規(guī)則的精確識別和模糊識別兩類方

3、法，詳細給出了識別規(guī)則，重點討論了模糊識別方法中基于對象截圖的位圖匹配和基于API攔截的文字匹配兩種方式，這兩種方式充分模擬人眼的功能，是平臺能操控任何軟件界面的基礎(chǔ)，是對自動化平臺適用范圍的極大擴展；對識別性能的優(yōu)化采用對象緩沖數(shù)據(jù)庫，通過緩存已識別的對象，可減少對象重新識別的次數(shù)，能一定程度上解決自動化平臺識別速度過慢的問題；對GUI軟件的操控采用基于Windows底層消息和鼠標(biāo)鍵盤模擬的混合方式，可對任何界面對象進行操控；CUI軟