【文章內容簡介】 了如下工作 ： 向用戶程序提供 抽象接口 根據(jù)用戶要求生成過濾指令 管理用戶緩沖區(qū) (用戶程序不可見 ) 負責用戶程序與內核的交互 如圖 4所示： 2. 包過濾 功能 根據(jù)目前社會存在的各種問題及語言習慣，建立有害信息庫，通過包捕獲功能提取的 IM軟 件傳輸?shù)拿魑南?，將其與有 害信息庫中的關鍵詞進行匹配，提取含有有害信息數(shù)據(jù)。如法輪功，帶有色情的信息和圖片 。 包過濾就離不開 Berkeley Packet Filter（ BPF） ，即伯克利數(shù)據(jù)包過濾器 ，它 提供了一種新的流量 監(jiān)測 結構，性能比其它工具有顯著提高。 BPF 工作原理： 用戶程序 Llibpcap 庫函數(shù) 用戶緩沖區(qū) 用戶程序 Llibpcap 庫函數(shù) 用戶緩沖區(qū) 復制緩沖區(qū) 存儲緩沖區(qū) 過濾器 復制緩沖區(qū) 存儲緩沖區(qū) 過濾器 網絡接口卡 用戶級 內核級 網絡 圖 4 Libpcap 工 作流程圖 第 8 頁 共 25 頁 許多版本的 UNIX 都提供用戶級別的網絡 監(jiān)測 功能，因為 監(jiān)測 程序以用戶級別進程工作。數(shù)據(jù)包的拷貝必須跨越內核 /用戶保護界限，這就需要使用名為包過濾器 (packet filter)的內核代理程序。 BPF主要由兩大部分組成 : 網絡分接頭 (Network Tap)和數(shù)據(jù)包過濾器 (Packet Filter)。網絡分接頭從網絡設備驅動程序處收集數(shù)據(jù)包拷貝，并傳遞給正在 監(jiān)測 的應用程序。過濾器決定某一數(shù)據(jù)包是被接收還是拒絕，以及如果被接受，數(shù)據(jù)中的那些部分被拷貝給應用程序。 如下圖 5： ?? 圖 5 BPF組成結構圖 3. 匹配 報警 功能 根據(jù)任務的實時性要求，報警、記錄日志、圖形顯示 等功能應建立在不影響包捕獲的基礎上。 當數(shù)據(jù)包匹配成功后， 說明內容為有害的 ，因此該信息丟棄，并發(fā)出報警聲。 4 論壇 監(jiān)測 軟件設計的總體方案 互聯(lián)網論壇 監(jiān)測 系統(tǒng)使用的是用戶 /服務器的模式。做服務器端的多臺機子在一個局域網內，組成目標論壇，接收來自其他網絡的客戶機的信息。做客戶端的機子在另外的局域網內，發(fā)信息給目標論壇。服務器機子裝上這個 監(jiān)測 軟件后，可以捕獲到客戶端機子向這臺機子發(fā)的信息（帖子）實現(xiàn) 監(jiān)測 功能。同時如果發(fā)應用程序 應用程序 緩存 緩存 緩存 過濾器 協(xié)議棧 鏈路層 驅動器 過濾器 過濾器 鏈路層 驅動器 鏈路層 驅動器 BPF ?? 橋接 橋接 第 9 頁 共 25 頁 的信息中含有發(fā)法輪功字眼等反動信息。該軟件就自動刪除該帖子實現(xiàn)過濾功能。并同時發(fā)出警報聲?？蛻舳藱C子和服務器端機子分別在各自的路由器網關下構成一個小型的內部局域網。他們分 別有各自的出口網關。 由此可得到它的拓撲圖如下 圖 6： 監(jiān)測 軟件主要功能 對 外部 網絡的 監(jiān)測 ： 根據(jù)具體網絡大小和 監(jiān)測 應用的范圍有所不同而 做 些修改即可。通過 監(jiān)測 機對網絡中所有主機的數(shù)據(jù)進行檢測， 收集 網絡中的數(shù)據(jù)，當發(fā)現(xiàn)正常的數(shù)據(jù)流時，監(jiān)測 機 不采取任何動作，當發(fā)現(xiàn)有敏感的數(shù)據(jù)時即可將其先隔離并保存下來，然后報警，通過管理員的操作和檢驗后再對用戶 pc 加以處理。這樣的工作流程對于中小型企業(yè)來說是比較適用，只需要一個 監(jiān)測 軟件即可，設備的投入也不大，效果也比較好。 數(shù)據(jù)獲取 ： 互聯(lián) 網論壇 監(jiān)測 系統(tǒng)呈現(xiàn)簡潔、歸一化的操作界面，多線程獲取網站發(fā)布數(shù)據(jù)。 在管理人員設定的遍歷層數(shù)范圍內，系統(tǒng)遞歸獲取起始及隨后頁面中所有超鏈接所對應的內容。 系統(tǒng)在受限于上述遍歷層數(shù)的同時，還能接受管理人員對于最大下載字節(jié)數(shù)與每次請求間隔時間的設置，從而避免因其內容獲取操作而造成目標論壇的工作負載驟然增加。 接入互聯(lián)網，對定點網站、論壇進行數(shù)據(jù)深入挖掘，基于發(fā)帖人、發(fā)帖時間、主題及正文進行分類檢索與統(tǒng)計，對目標站點的信息提取率達到 90%。 專項針對目標論壇的信息發(fā)布進行內容獲取，對目標論壇分組，基于論壇組進 行高效的輪詢式全文獲取；采用純文本方式存儲，以最大限度節(jié)約空間。 顯示當前已經獲取帖子的 發(fā)帖人 、 發(fā)帖時間 、 帖子位置 、 帖子標題 、 帖 子URL 等基本信息 。 HUB 目標論壇 監(jiān)聽機 PC HUB PC 圖 6 系統(tǒng)總體結構 第 10 頁 共 25 頁 內容過濾功能： 包括 對不需要監(jiān)視的對象、內容、行為進行過濾（忽略監(jiān)視），可針對 3 種對象（整個網絡、分組、電腦） 。 全部監(jiān)視 /不監(jiān)視、只監(jiān)視部分應用 。 根據(jù)不用管理需要，可設置為某些對象監(jiān)視 ,某些對象不監(jiān)視（比如 管理員和老板沒有必要被監(jiān)視），某些用戶應用監(jiān)視 ,某些應用不監(jiān)視 。 由于網頁監(jiān)視很多廣告垃圾而且比較消耗硬盤空間等資源 。 如果有人在觀看網站的帖子后，想 發(fā)表評論，如果評論中包含 色情 和反動的字眼就自動刪除該帖子，并發(fā)出警報。 網站過濾白名單和黑名單功能 。 可設置只監(jiān)視具體的一些網站，也可以忽略監(jiān)視某些網站；比如一個公司里通常 SINA 這樣的網站可 能同時所有的人都有去看，如果都監(jiān)視的話將相當浪費資源又內容重復 ， 實際上也無意義和必要 。 因此采用過濾方法模糊控制模式去忽略對一些公共的東西過濾 。 比如輸入 SINA，將過濾全部包含 SINA 的所有 URL 訪問 ，這叫做白名單過濾。對包含色情和反動信息的過濾叫做黑名單過濾。 流量監(jiān)視與限制： 包括 針對具體的對象，能夠詳細準確監(jiān)視其 發(fā) 生的流量 ， 并能夠限制其占據(jù)的流量帶寬 。 數(shù)據(jù)備份和配置管理 ： 包括 允許定義數(shù)據(jù)保存時間或刪除過時的數(shù)據(jù) 。 數(shù)據(jù)、配置和日志的查看、打印、備份恢復功能 。 簡單容易的數(shù)據(jù)備份方式和海量存儲模式 。 支持監(jiān)視內容和配置文件的 海量模式備份、恢復 。 監(jiān)測 系統(tǒng) 功能模塊的描述 對 用戶 上網行為的 監(jiān)測 和管理事實上要配合一個復雜的網絡系統(tǒng)體系去實現(xiàn)，首先要定義 網絡用戶的類型，普通用戶、管理員等都應 有不同的網絡權限去獲得網絡的資源，因此就需要網管功能的軟硬件了 。 此外對 用戶 的數(shù)據(jù)的 監(jiān)測 就只能通過流控設備去實現(xiàn)，了 解 所使用 的 各個服 務的流量，對敏感的流量和服務有必要進行抓包分析。特別是對技術含量較高的企業(yè) 有很大用途。 本系統(tǒng) 根據(jù)功能模塊化分為后臺和前臺軟件兩部分。后臺部分由主進程和主線程完成。主進程通過主控模塊實現(xiàn)。主線程通過包捕獲模塊、解碼模塊、模式匹配模塊和輸出模塊來完成。前臺部分包括圖形顯示模塊、命令模塊。 主控模塊實現(xiàn)的功能包括所有模塊的初始化、命令行解釋、配置文件解釋、建立主線程、關閉主線程。 包捕獲模塊是主線程 的主程序，它將數(shù)據(jù)包捕獲后的處理交給解碼模塊。解第 11 頁 共 25 頁 碼模塊，定義不同的數(shù)據(jù)結構取得 IP地址、 TCP層的端口號以及信息實 體等數(shù)據(jù)，在將這些數(shù)據(jù)填寫到數(shù)據(jù)結構中供模式匹配模塊來使用。 解碼模塊把從網絡上抓取的原始數(shù)據(jù)包，從下向上沿各個協(xié)議棧進行解碼并填充相應的數(shù)據(jù)結構，以便模式匹配模塊處理。 模式匹配模塊應用 KWP算法將 匹配字庫與捕獲到的 IM信息進行匹配，提取有害信息，對有害信息進行定位。 輸出模塊接收模式匹配模塊匹配出的結果建立黑名單，根據(jù)輸出類型分別分發(fā)到圖形顯示模塊、日志模塊及提供黑名單給網關計算機以便于攔截計算機攔截有害內容。 命令模塊將用戶的信息傳遞給主控模塊。 圖形顯示模塊顯示目前的關鍵字和匹配成功的信息和信息的源 IP地址、目的IP地址、端口號、 ID號。 日志模塊實現(xiàn)各種報文日志功能，也就是把各種類型的報文記錄到各科類型的日志中。 系統(tǒng)功能模塊圖如下 圖 7： 系統(tǒng)功能模塊主控模塊命令模塊輸 出 模 塊日 志 模 塊圖 形 顯 示 模 塊解 碼 模 塊匹 配 模 塊包 捕 獲 模 塊 圖 7 系統(tǒng)功能模塊 5 論壇 監(jiān)測 軟件的實現(xiàn) 通過分析，后臺軟件選用 Red (Linux )作為開發(fā)平臺。主要因為 ： 1. Linux網絡功能強大，其本身是依靠網絡技術發(fā)展的。 2. Linux libpcap支持的比較好。并且可以得到 libpcap的更新版本。 第 12 頁 共 25 頁 3. 目前的幾種主流抓包軟件都有支持 Linux的版本，便于比較功能。 4. Linux下的軟件是開放式源代碼產品，便于學習。 5. 基于開放式源代碼的特性，系統(tǒng)中不會存在后門，安全性好。由于 Window系統(tǒng)的圖形開發(fā)功能強大，因此選擇在 Win2021professional上開發(fā)前臺軟件 。 服務器端建議用戶的計算機使用以下配置（或更高）： CPU： Intel 或兼容機 硬盤： 7200 轉 /分，剩余空間 100M 內存：建議 512MB 或更多 鼠標： 3D 光電鼠 鍵盤：標準 104 鍵 Microsoft Windows NT Server 、 Windows 2021 Server、 Microsoft Windows NT Server 企業(yè)版、 Windows 2021 Advanced Server 及 Windows 2021 Data Center Server 或者更高軟件版本 。 客戶端推薦配置 : 客戶端要求不高， 以上或者兼容版本 。 本設計 預期成果 是完成互聯(lián)網論壇 監(jiān)測 的功能并能夠實現(xiàn)通過身份驗證，實現(xiàn)客戶端訪問服務器時，可以通過服務器上的 監(jiān)測 系統(tǒng)，把客戶端的信息捕獲到 并實現(xiàn)過濾功能 。提供本畢業(yè)設計開發(fā)的軟件和畢業(yè)設計論文。 軟件模塊的實現(xiàn) 主控模塊 ： 主進程功能通過主控模塊完成，主控模塊是系統(tǒng)的初始化進程。 首先它負責解釋命令行，它調用了 getopt函數(shù)，來進行命令行的解析。如果命令行給出的參數(shù)不正確，會提示用戶一個信息然后退出。如果命令行給出的參數(shù)正確，將參數(shù)相應的數(shù)據(jù)放在一個全局的緩沖區(qū)內。參數(shù)內容即過濾規(guī)則供包捕獲模塊使用。 第二點建立 socket，主控模塊 socket的處理主要是完成接收命令模塊發(fā)送的消息，根據(jù)數(shù)據(jù)包的類型標志位分 別處理。 第三處理用戶命令。 啟動抓包 ： 初始化抓包線程。 停止抓包 ： 關閉抓包線程。 查看當前流量 ： 打開系統(tǒng)中 /pros//dev文件，從而獲得網絡接口 的流第 13 頁 共 25 頁 量數(shù)據(jù)，然后將數(shù)據(jù)后發(fā)送給前臺軟件進行顯示。 結束主程序 ： 最后等待用戶退出消息，結束該系統(tǒng)工作，完成應用退出時的釋放資源工作。 包捕獲模塊 ： 包捕獲模塊是通過啟動主線程來完成的。主線程啟動后首先讀取存放關鍵詞的文件，將