基于協(xié)議分析的網(wǎng)絡信息還原及挖掘.pdf

1、隨著Internet的迅速發(fā)展，網(wǎng)絡技術和信息技術也得以廣泛的應用與發(fā)展。據(jù)中國互聯(lián)網(wǎng)絡信息中心(CNNIC)發(fā)布的“第二十次中國互聯(lián)網(wǎng)絡發(fā)展狀況統(tǒng)計報告”顯示，截至2007年6月，中國網(wǎng)民人數(shù)已經(jīng)達到1.62億，僅次于美國2.11億的網(wǎng)民規(guī)模，位居世界第二。比2006年年末新增了2500萬網(wǎng)民，與2006年同期相比，網(wǎng)民數(shù)一年內(nèi)增加了3900萬人。與2006年中相比，主要基礎資源呈爆炸式增長。其中，IP地址增長率接近40％，域名數(shù)增長

2、率達到211％，網(wǎng)站增長率達到66％，國際出口帶寬增長率達到46％，中國網(wǎng)民的網(wǎng)絡環(huán)境進一步改善。 無論對于政府、企業(yè)，還是普通網(wǎng)民，網(wǎng)絡信息都已經(jīng)是一個重要的信息來源。通過基于網(wǎng)絡信息流的協(xié)議分析，可以用它來研究網(wǎng)絡的運行狀況和信息監(jiān)控。 本文首先介紹了網(wǎng)絡的基本結(jié)構，并結(jié)合筆者在網(wǎng)絡信息捕獲和還原方面的實際實習工作經(jīng)驗，詳細分析了基于Linux平臺的網(wǎng)絡信息截獲技術，協(xié)議分析技術等；給出了網(wǎng)絡數(shù)據(jù)監(jiān)聽的工作原理，并對

3、數(shù)據(jù)包的捕獲機制和過濾機制進行了一定的分析。然后，采用基于Libpcap函數(shù)庫的方案進行數(shù)據(jù)監(jiān)聽的實現(xiàn)，并針對不同的應用層協(xié)議，分別針對HTTP、MSN和YMSG協(xié)議中傳送的數(shù)據(jù)，進行協(xié)議分析，并對網(wǎng)絡信息流進行提取有用的信息，還原成標準格式的數(shù)據(jù)，并存入數(shù)據(jù)庫。 接下來，針對網(wǎng)絡信息的極其豐富，數(shù)據(jù)量特別巨大的特點，本文引進了數(shù)據(jù)挖掘的方法，數(shù)據(jù)挖掘就是從大量的數(shù)據(jù)中挖掘出有用的信息。它是根據(jù)人們的特定要求，從浩如煙海的數(shù)據(jù)中