基于用戶ID的智能網絡爬蟲研究.pdf

1、隨著互聯網的迅猛發(fā)展，全球信息總量與日俱增，隨著移動互聯網的興起，這種發(fā)展趨勢將更加迅猛。人物信息捜索系統是專門為解決互聯網人物捜索難題而產生的搜索系統?，F有的人物捜索系統對于名人等公眾人物具有很好的效果，而且是針對人物的真實姓名，但是對于非知名的現實生活中的一般人物、只有網絡昵稱的人物等人物信息搜索卻顯得無能為力。
　　本文中主要研究了主題爬蟲的相關技術，以及社交網絡中的數據獲取技術。在上述相關技術研究的基礎上，結合人物信息收集

2、的應用場景，本文提出了基于用戶ID的智能網絡爬蟲系統，從用戶給出的目標人物ID為觸發(fā)條件，收集與目標人物信息相關頁面數據。本文研究的智能網絡爬蟲是對傳統的主題爬蟲的改進，引入了主題特征自動擴展的功能?？紤]社交網絡對于人物信息收集的巨大價值，通過對社交網站中數據獲取方式的研究，利用社交網絡數據獲取的相關技術增強了本爬蟲對于社交網絡中數據的獲取能力。
　　本文設計和實現了本文中研究方案的實驗系統，并進行了主要模塊和系統整體測試，以及實