分布式數(shù)據(jù)處理系統(tǒng)的研究與應用.pdf

1、隨著網(wǎng)絡技術的普遍應用，數(shù)據(jù)的產(chǎn)生日益加快，如何有效地處理數(shù)據(jù)已成為業(yè)內(nèi)關注的熱點問題。傳統(tǒng)的數(shù)據(jù)處理系統(tǒng)以靜態(tài)的有限數(shù)據(jù)集為對象，通過調(diào)用靜態(tài)的查詢腳本就可獲得所需的查詢結果。當今，數(shù)據(jù)以流行式逐漸向連續(xù)、快速、時變方向轉變等，傳統(tǒng)數(shù)據(jù)庫應用環(huán)境的弊端逐漸顯露出來，已經(jīng)無法滿足現(xiàn)代化工作的需求。在新的應用背景下，人們對數(shù)據(jù)庫系統(tǒng)的功能和性能有了更高的要求，同時也對數(shù)據(jù)處理的自動化和智能化提出了更高的要求。
　　論文首先分析了國內(nèi)

2、外分布式數(shù)據(jù)處理系統(tǒng)的研究現(xiàn)狀，然后設計了一種典型的分布式數(shù)據(jù)處理系統(tǒng)方案，并討論了該系統(tǒng)中的兩個關鍵技術，最終將其應用在郵包傳送系統(tǒng)項目中。
　　論文研究了分布式數(shù)據(jù)處理中的兩個關鍵技術：查詢和降載。與傳統(tǒng)的靜態(tài)查詢不同，數(shù)據(jù)源不間斷地進入系統(tǒng)，連續(xù)查詢始終保持在執(zhí)行查詢并輸出查詢結果的狀態(tài)。筆者分析了連續(xù)查詢的特點和內(nèi)存空間的分配情況，設計了一種基于貪心策略的動態(tài)滑動窗口查詢算法，提高了連續(xù)查詢處理的效率。
　　降載是針