分布式數(shù)據(jù)流負載管理技術研究.pdf

1、數(shù)據(jù)流處理技術是最近幾年數(shù)據(jù)庫領域的一個新的研究方向，由于其廣泛的應用前景而得到了廣大研究人員的關注。分布式系統(tǒng)具有廉價的成本、強大的處理能力，處理速度快、數(shù)據(jù)量大的數(shù)據(jù)流具有先天的優(yōu)勢，分布式數(shù)據(jù)流處理技術一直是數(shù)據(jù)流研究中的重要組成部分。 論文主要就分布式數(shù)據(jù)流管理系統(tǒng)中的負載管理技術進行研究，主要工作包括以下幾個方面：對已有DSMS原型系統(tǒng)的負載管理技術進行了分析，指出了數(shù)據(jù)流管理系統(tǒng)中負載管理技術的特點和設計原則，改進了

2、Borealis中的負載管理模塊，建立了一個實驗平臺；提出了一種基于算子相關性分析和網(wǎng)絡流量分析的負載平衡算法，有效的減少了算子遷移所帶來的負面影響；對分布式查詢網(wǎng)絡中的降載問題進行了研究，分析了節(jié)點間的負載依賴性，改進了一種分布式降載策略；研究了已有的滑動窗口連接查詢中的降載技術，結合前人一些研究成果的優(yōu)點，提出了一種基于基本窗口輸出頻率的滑動窗口連接查詢降載算法。本文對負載管理技術的研究，立足于實際應用環(huán)境，盡可能減少不必要的假設，