面向數據集成的分布式流水線查詢處理的研究.pdf

1、分布式查詢處理是數據集成系統實現的關鍵技術之一。優(yōu)化查詢處理方式,提高執(zhí)行效率并縮短查詢響應時間,一直是數據集成系統研究的重要主題。
　　暨南大學信息科學技術學院高性能數據庫開發(fā)實驗室前已開發(fā)面向大數據分析環(huán)境事務數據在線集成的通用中間件系統II_SERVICE。它支持對跨組織及網域的異構信息源實現虛擬方式與實體化方式相結合的數據集成,從而屏蔽底層數據源差異，向應用提供基于全局模式的透明數據訪問支持。
　　本文在此基礎上，致

2、力于研究在網絡傳輸速率難以預測的前提下，如何提高集成端的匯總處理的執(zhí)行效率，并縮短查詢響應時間。主要內容包括:
　　(1)對實現SQL查詢的代數運算深入分析其阻塞性及運算分解與組合,以形成盡可能佳的流水線組織及計算節(jié)點間數據傳遞方式。
　　(2)研究查詢運算的狀態(tài)性，對查詢語法樹中可以進行存儲流水計算的節(jié)點進行優(yōu)化，通過減少輸入元組與歷史元組的匹配量，進而提高流水線的執(zhí)行效率，所提出的流水線雙哈希連接算法利用雙哈希策略可以有