【導(dǎo)讀】導(dǎo)下進(jìn)行的研究工作及取得的成果。盡我所知，除文中特別加以標(biāo)注和致。含我為獲得及其它教育機(jī)構(gòu)的學(xué)位或?qū)W歷而使用過的材料。明并表示了謝意。以贏利為目的前提下，學(xué)?？梢怨颊撐牡牟糠只蛉績?nèi)容。其他個人或集體已經(jīng)發(fā)表或撰寫的成果作品。對本文的研究做出重要貢獻(xiàn)。的個人和集體，均已在文中以明確方式標(biāo)明。本人完全意識到本聲明的法。律后果由本人承擔(dān)。涉密論文按學(xué)校規(guī)定處理。挖掘，并將挖掘結(jié)果應(yīng)用于電子商務(wù)決策支持，以此來提升電子商務(wù)競爭力。公司的商業(yè)決策提供強(qiáng)有力的支持。但是目前國內(nèi)的大多數(shù)中小型電子商務(wù)企業(yè)，其電。它不但可以擴(kuò)大商家的規(guī)模和市場影響。力，而且可以減少企業(yè)的經(jīng)營成本，提高工作效率。面，用戶資料修改等功能，為管理員提供了商品管理，用戶信息管理，新聞信息管理，在設(shè)計方面，本系統(tǒng)采用B/S三層結(jié)構(gòu)，同時使用JSP技術(shù)進(jìn)行。的關(guān)鍵代碼進(jìn)行封裝。后臺數(shù)據(jù)庫選用MSSQLserver數(shù)據(jù)庫。

　　

【正文】 gif、 .jpg、 .js、 .css 等的記錄刪除。但是 ， 如果是對于一個主要包含圖形文件的站點(diǎn) ， 日志中 URL 的后綴名為 .jpg、 .gif 等的記錄可能就代表了用戶的顯示 請求 ， 此時就不能將這類記錄刪除。另外 ， 還要刪除的就是一些由于 Web 應(yīng)用程序所產(chǎn)生的訪問請求所產(chǎn)生的記錄（如建立 Web 索引的程序和檢查連接是否有效的程序）以及一些錯誤和失敗的請求和記錄。 Algorithm: DataCleaning(LogFile: Web 日志文件； LogBase: Web 日志數(shù)據(jù)庫 ) Begin 桂林理工大學(xué)本科畢業(yè)設(shè)計論文 28 While not eof(LogFile)Do //在到達(dá)文件尾之前 ， EOF 函數(shù)始終返回 False。 LogRecord=Read(LogFile) If((gif， jpeg， jpg， css， js， cgi)) AND(=’GET’)AND ((301， 404， 500))AND //用戶請求訪問失敗的記錄 ((Crawler， Spide， Robot)) Then Write(LogBase， LogRecord) End If End While End 就是一個 簡單的 數(shù)據(jù)凈化算法 ， 但是此算法對于具體分析的站點(diǎn)類型依賴較強(qiáng) ， 對于不同類型的站點(diǎn)需要采用不同的算法。如對于一個主要包含圖片文件的站點(diǎn) ， 其圖形文件可能代表了用戶的顯示 請求 ， 就不能采用此算法。并且 ， 此算法對分析人員了解數(shù)據(jù)的程度提出了很高的要求 ， 如果分析人員在對所要分析的數(shù)據(jù)沒有了解透徹的情況下用此算法對數(shù)據(jù)進(jìn)行凈化很可能造成數(shù)據(jù)缺失或數(shù)據(jù)冗余 。 基于此 ， 本文針對中小型電子商務(wù)網(wǎng)站瀏覽和交易人數(shù)少的特點(diǎn) ， 采用了將所收集數(shù)據(jù)導(dǎo)入 Excel 數(shù)據(jù) 表 ， 在 Excel 中進(jìn)行數(shù)據(jù)凈化、用戶識別 、會話識別的 方法。實(shí)踐證明此方法在效率、速度、準(zhǔn)確率方面完全符合數(shù)據(jù)預(yù)處理的要求。 用戶識別的目的是對用戶的唯一性的識別。但是 ， 由于用戶端高速緩存、代理服務(wù)器和防火墻的存在及為用戶動態(tài)的分配 IP 地址等等 ， 使得這一過程的實(shí)現(xiàn)較為復(fù)雜。一般來說 ， 人們在識別用戶的過程中 ， 會遇到以下的典型問題： 1) 單個 IP 地址 /多個服務(wù)器進(jìn)程 —— 例如 ， ISP 利用 Proxy 代理為用戶提供服務(wù) ， 這樣 ， 同一個 IP訪問同一個 Web 站點(diǎn)（同時） ， 很可能是不同的用戶。 2) 多個 IP 地址 /單個服務(wù)器進(jìn)程 —— 有些 ISP 對來自同一個用戶的請求 ， 會隨機(jī)分配若干個 IP 中的一個給用戶 ， 這樣 ， 一個用戶進(jìn)程會有不同的 IP。 3) 多個 IP 地址 /單個用戶 —— 從不同機(jī)器上訪問 Web 的同一個用戶因?yàn)椴煌倪M(jìn)程桂林理工大學(xué)本科畢業(yè)設(shè)計論文 29 而擁有不同的 IP， 這也使得追蹤同一個用戶變得復(fù)雜。 4) 多服務(wù)器進(jìn)程 /單個用戶 —— 這種情況發(fā)生在用戶打開多個瀏覽器窗口 ， 同時對同一個站點(diǎn)的不同部分進(jìn)行訪問。 5) 單用戶 /多用戶 —— 多個人使用同一臺機(jī)器 ， 如家庭或公用計算機(jī)。 盡管目前已有多種方法能夠用來識別 用戶 ， 如： Cookies 和內(nèi)嵌用戶 ID、客戶端軟件 agent、注冊使用等 ， 但用戶卻有可能因?yàn)榘踩矫娴目紤]而關(guān)閉 Cookies， 或因?yàn)椴辉感孤峨[私而使用假信息進(jìn)行注冊等。所以 ， 在通常情況下 ， 只有通過分析日志文件中的 IP地址、 agent 等信息來識別不同的用戶。由于本文所收集數(shù)據(jù)是 CLF 格式的 ，沒有用戶代理這一項紀(jì)錄 ， 所以采取兩個步驟來對用戶身份進(jìn)行識別。首先 ， 不同的 IP 代表不同的用戶；其次 ， 如果訪問日志中兩條記錄的 IP 地址相同 ， 但用戶當(dāng)前請求的頁面同用戶已瀏覽的頁面之間沒有鏈接關(guān)系 ， 則認(rèn)為存在 另一個具有相同 IP 地址的用戶。 會話識別是建立在對用戶識別的基礎(chǔ)上的 ， 其目的是將用戶的訪問記錄分為單個會話。通常采用超時的方法來識別用戶會話 ， 即如果兩頁間請求時間的差值超過一定的界限就認(rèn)為用戶開始了一個新的會話。 J Pitkow 的實(shí)驗(yàn)證明 ， 比較合理的時間長度應(yīng)該是 分鐘。但是本文所作研究僅需要知道每一個用戶登錄的網(wǎng)站網(wǎng)頁數(shù)目 ， 因此 ， 在本文中會話識別不是主要關(guān)注的技術(shù)。 桂林理工大學(xué)本科畢業(yè)設(shè)計論文 30 5 系統(tǒng)測試 系統(tǒng)運(yùn)行環(huán)境的搭建 本系統(tǒng)采用的是基于 Java 的 jsp 技術(shù) ， 所以 Java 虛擬環(huán)境即 Java 虛擬機(jī)是必須要安裝的。 JDK(Java Development Kit )是一切 java 應(yīng)用程序的基礎(chǔ) ， 可以說 ， 所有的 java應(yīng)用程序是構(gòu)建在這個之上的。它是一組 API， 也可以說是一些 java Class。目前已經(jīng)正式發(fā)布的最新版本是 。 Windows 下 ， 直接運(yùn)行 .exe 文件 ， 安裝到一個目錄 ， 如C:/， 安裝完成后就是環(huán)境變量的設(shè)置。 桌面上選擇“我的電腦” (右鍵 ) － 高級 環(huán)境變量 在“系統(tǒng)變量” “新建” 在變量名中輸入 ： JAVA_HOME， 變量值中輸入： C:/ 同樣再新建一個變量名 CLASSPATH ， 變量值中輸入： C:\。 C:\\lib\。 C:\\lib\。 還需要在 Path 變量值后面添加一個值： C:\\bin。至此 JAVA 環(huán)境安裝成功。我們可以在命令行中敲入命令 java 如果顯示 java 幫助 ， 則證明環(huán)境設(shè)置成功。 Tomcat服務(wù)器安裝 安裝 Tomcat， 直接使用默認(rèn)安裝就可以了 ， 假如我們將其安裝在 C:\， 安裝完畢后 ， 開始設(shè)置環(huán)境變量 ， 新建環(huán)境變量 CATALINA_HOME， 值為 C:\，新建 CATALINA_BASE， 值為 C:\。 打開 文件中的 bin 文件 ， 雙擊其中的運(yùn)行程序 tomcat6， 顯示 server start， 服務(wù)器正常啟動 ， 此時在瀏覽器上敲入本地測試地址： 如果出現(xiàn) Tomcat 頁面則證明 Tomcat 安裝成功 ， 而且正常啟動。 默認(rèn)情況下 ， tomcat 服務(wù)器是不記錄用戶訪問日志的 ， 我們 通過修改 $\Tomcat \conf 目錄下的 文件開啟記錄訪問日志功能。 桂林理工大學(xué)本科畢業(yè)設(shè)計論文 31 到這里 ， 系統(tǒng)運(yùn)行所需要的基本運(yùn)行環(huán)境已經(jīng)安裝完成。 系統(tǒng)程序的安裝和加載 我們可以將整個系統(tǒng)文件夾 Product Project 拷貝到 Tomcat 的默認(rèn)根目錄下 ， 一般路徑為： C:\\webapps\ROOT。 系統(tǒng)采用 JDBC 方式連接 MS SQL server 數(shù)據(jù)庫 ， 到 Microsoft 網(wǎng)站上下載 文件 ， 放到 $\Tomcat \lib 文件夾下 ， 然后在 my eclipse 中綁定 文件；在 SQL server 中以 sa 用戶名 SQL server 身份驗(yàn)證方式登錄 ， 數(shù)據(jù)庫的連接部分完成。 在瀏覽器敲入地址： 我們可以看到網(wǎng)站的主頁面已經(jīng)出現(xiàn) ， 至此 ， 系統(tǒng)加載成功。 單元測試 用戶注冊、登錄測試用例表 執(zhí)行的操作 期望的結(jié)果 實(shí)際結(jié)果 結(jié)論 1以用戶 xizaoxiaoquan登錄（系統(tǒng)已注冊了該用戶） ，輸入正確的密碼。然后查詢商品 ， 訂購商品。 能夠查詢商品 和訂購商品 順利查詢到商品和訂購商品 符合 2 以用戶 qinliquan 登錄（系統(tǒng)沒有注冊該用戶） 系統(tǒng)提示沒有該用戶 系統(tǒng)只能提示用戶名或密碼錯誤 功能不完善 3 用 xizaoxiaoquan 登錄 ，輸入不正確的密碼 系統(tǒng)提示密碼錯 系統(tǒng)只能提示用戶名或密碼錯誤 功能不完善 表 531 桂林理工大學(xué)本科畢業(yè)設(shè)計論文 32 商品管理模塊的測試用例表 執(zhí)行的操作 期望的結(jié)果 實(shí)際結(jié)果 結(jié)論 添加商品 ， 必填字段全部填完整。 系統(tǒng)顯示商品添加成功。 系統(tǒng)顯示商品添加成功。 符合 2 添加商品 ， 部分必填字段不填寫。 系統(tǒng)提示有哪個商品信息需 要輸入。 系統(tǒng)提示有哪個商品信息需要輸入。 符合 3 刪除商品 ， 該商品主鍵不被其他引用。 系統(tǒng)提示刪除成功。 系統(tǒng)提示刪除成功。 符合 4 刪除商品 ， 該商品主鍵被其他引用。 系統(tǒng)提示刪除失敗 系統(tǒng)提示刪除失敗 符合 表 532 用戶管理模塊的測試用例表 執(zhí)行的操作 期望的結(jié)果 實(shí)際結(jié)果 結(jié)論 添加用戶 ， 必填字段全部填完整。 系統(tǒng)顯示用戶添加成功。 系統(tǒng)顯示用戶添加成功。 符合 2 添加管理員 ， 部分必填字段不填寫。 系統(tǒng)提示有哪個管理員信息需要輸入。 系統(tǒng)提示有哪個管理員信息需要輸入。 符合 3 刪 除用戶 ， 該用戶主鍵不被其他引用。 系統(tǒng)提示刪除成功。 系統(tǒng)提示刪除成功。 符合 4 刪除管理員 ， 該管理員主鍵被其他引用。 系統(tǒng)提示刪除失敗 系統(tǒng)提示刪除失敗 符合 表 533 桂林理工大學(xué)本科畢業(yè)設(shè)計論文 33 商品推薦模塊的測試用例表 執(zhí)行的操作 期望的結(jié)果 實(shí)際結(jié)果 結(jié)論 以未登錄狀態(tài)瀏覽少量商品 系統(tǒng)能推薦基本符合用戶需求的商品 不能推薦 不符合 以未登錄狀態(tài)瀏覽大量商品 系統(tǒng)能推薦符合用戶需求的商品 不能推薦 不符合 以 xizaoxiaoquan 用戶名登錄后瀏覽少量商品 系統(tǒng)能推薦基本符合用戶需求的商品 不能推 薦 不符合 以 xizaoxiaoquan 用戶名登錄后瀏覽大量商品 系統(tǒng)能推薦符合用戶需求的商品 不能推薦 不符合 表 534 本章小結(jié) 本系統(tǒng)完成后我對此網(wǎng)站進(jìn)行了全面的運(yùn)行查錯 ， 發(fā)現(xiàn)了很多小問題 ， 比如輸入錯誤數(shù)據(jù)導(dǎo)致網(wǎng)站崩潰 ， 網(wǎng)站顯示錯誤等 ， 對此我也一一做了調(diào)試修改 ， 最后也都修正了 ，在壓力測試上也對服務(wù)器允許的最大并發(fā)用戶數(shù)和交易數(shù)進(jìn)行了測試。在持續(xù)測試上證明了本網(wǎng)站在實(shí)際環(huán)境下能夠持續(xù)工作。對數(shù)據(jù)庫聯(lián)接也進(jìn)行了測試 ， 數(shù)據(jù)庫聯(lián)接測試是用來確定數(shù)據(jù)庫服務(wù)器是否能夠支持期望的連接數(shù)。 桂林理工大學(xué)本科畢業(yè)設(shè)計論文 34 總 結(jié) 本文 具體論述了網(wǎng)上購物 網(wǎng)站 的主要功能及體系結(jié)構(gòu) ，由于客觀原因，系統(tǒng) 實(shí)現(xiàn)了購物網(wǎng)站中的大多數(shù)應(yīng)用功能，而沒有最終實(shí)現(xiàn)基于數(shù)據(jù)挖掘的商品推薦、個性化頁面布局等功能，但研究了對記錄在服務(wù)器上的用戶瀏覽日志文件進(jìn)行數(shù)據(jù)預(yù)處理的過程。這些技術(shù)的實(shí)現(xiàn) ， 滿足了系統(tǒng)的 基本 需要 ， 且一定程度上 優(yōu)化了系統(tǒng)的性能。目前基于該模型的系統(tǒng)處于實(shí)驗(yàn) 階段 ， 還存在許多問題與不足 ， 如安全性能還不完善 ， 缺少必要的數(shù)據(jù)加密系統(tǒng)等 ， 這些功能與技術(shù)還需要加以提高和實(shí)現(xiàn)。 網(wǎng)上購物系統(tǒng)無論是在開發(fā)過程中 ， 還是建成后的日常維護(hù)過程中 ， 都需要進(jìn)行 嚴(yán)格的檢測 ， 以保證購物系統(tǒng)的服務(wù)質(zhì)量。隨著網(wǎng)上購物系統(tǒng)技術(shù)的日趨成熟、網(wǎng)上購物的優(yōu)勢日趨明顯 ， 會有更多的人參與到網(wǎng)上購物的浪潮中來 ， 人類最終將迎接電子商務(wù)時代的來臨。 桂林理工大學(xué)本科畢業(yè)設(shè)計論文 35 致 謝 首先 ， 謹(jǐn)向我的導(dǎo)師陳曉輝老師致以衷心的感謝和深深的敬意。在我研究課題的期間 ， 從論文的選題到數(shù)據(jù)的收集 ， 乃至后面查找資料以及研究中遇到的棘手問題 ， 都得到了導(dǎo)師的全力幫助和精心指導(dǎo)。陳曉輝 老師認(rèn)真嚴(yán)謹(jǐn)?shù)闹螌W(xué)態(tài)度、淵博的知識、勤奮工作的精神、平易近人的作風(fēng)以及樂觀積極的人生態(tài)度都潛移默化地感染了我 ， 使我終生受益。 衷心感謝四年來與我一起 學(xué)習(xí)的同學(xué)們給我的幫助 ， 在我撰寫論文期間 ， 同學(xué)們給了我很多有建設(shè)性意義的意見及其他幫助 ， 使我在研究過程中少走了很多彎路 。與此 同時 ， 感謝四年 來 教授我學(xué)識的老師們 ， 是您們?yōu)槲掖蛳铝藞詫?shí)的基礎(chǔ) ， 培養(yǎng)了我的自學(xué)能力 ， 使我在課題研究期間能夠輕松掌握新的知識與方法。 最后感謝我的父母和家人 ， 他們在物質(zhì)上的支持是我完成今天學(xué)業(yè)的堅實(shí)基礎(chǔ) ， 精神上的鼓勵更是我勇往直前的動力。 桂林理工大學(xué)本科畢業(yè)設(shè)計論文 36 參考文獻(xiàn) [1] 武延軍 黃飛躍 . 精通 JSP 編程技術(shù) [M]. 北京：人民郵電出版社 ， [2] 柏亞軍 . JSP 編程基礎(chǔ)及應(yīng)用實(shí)例集錦 [M].北京：人民郵電出版社 ， [3] 清宏計算機(jī)工作室 .JSP 編程技巧 [M].北京：機(jī)械工業(yè)出版社 ， [4] 周影 .網(wǎng)絡(luò)編程語言 JSP 實(shí)例教程 [M].北京：電子工業(yè)出版社 ， [5] 陳海山 .深入 Java Servlet 網(wǎng)絡(luò)編程 [M].北京：清華大學(xué)出版社