【正文】 網(wǎng)站架構(gòu)總體設(shè)計(jì) 一、概 述 二、 需求分析 異構(gòu)系統(tǒng) 異構(gòu)應(yīng)用 異構(gòu)數(shù)據(jù) 網(wǎng)站結(jié)構(gòu) 內(nèi)容海量 內(nèi)容深度 服務(wù)深度 發(fā)布系統(tǒng) 網(wǎng)絡(luò)安全 信息安全 三、方案整體規(guī)劃 3． 1 設(shè)計(jì)目標(biāo) 3． 2 實(shí)施規(guī)劃 四、網(wǎng)絡(luò)解決方案 拓?fù)浣Y(jié)構(gòu)圖 硬件選型、分布與規(guī)劃 數(shù)據(jù)庫服務(wù)器 web 發(fā)布服務(wù)器 cgi 服務(wù)器 內(nèi)容管理發(fā)布服務(wù)器 內(nèi)容管理生成服務(wù)器 數(shù)據(jù)存儲設(shè)備 安全設(shè)備 防病毒 原有服務(wù)器與置換服務(wù)器比較 新增硬件配置清單 五、軟件解決方案 系統(tǒng)架構(gòu) 系統(tǒng)軟件整合 網(wǎng)站內(nèi)容管理系統(tǒng) 網(wǎng)站內(nèi)容管理系統(tǒng)介紹 網(wǎng)站后臺管理系統(tǒng) 網(wǎng)站采編應(yīng)用系統(tǒng) 網(wǎng)站調(diào)查投票子系統(tǒng) 站點(diǎn)內(nèi)容全文檢索子系統(tǒng) 文章評論系統(tǒng) 網(wǎng)站論壇、聊天室子系統(tǒng) 網(wǎng)站會員認(rèn) 證管理子系統(tǒng) 網(wǎng)站廣告發(fā)布子系統(tǒng) 六、網(wǎng)站音視頻管理系統(tǒng) 用戶需求分析 產(chǎn)品概述 技術(shù)特點(diǎn) 基礎(chǔ)構(gòu)架和運(yùn)行環(huán)境 功能描述 拓?fù)浣Y(jié)構(gòu)圖 音視頻系統(tǒng)組成 七、項(xiàng)目實(shí)施進(jìn)度安排 項(xiàng)目領(lǐng)導(dǎo)小組 項(xiàng)目實(shí)施小組 質(zhì)量監(jiān)督小組 系統(tǒng)集成實(shí)施進(jìn)度計(jì)劃及工作日程表 八、培訓(xùn)、支持和服務(wù) 培訓(xùn)服務(wù) 基本操作培訓(xùn) 系統(tǒng)管理培訓(xùn) 培訓(xùn)安排 培訓(xùn)內(nèi) 容 技術(shù)支持服務(wù) 硬件平臺技術(shù)支持 應(yīng)用軟件平臺技術(shù)支持 售后服務(wù) 九、小結(jié) 附錄 硬件產(chǎn)品說明 hp dl 580 hp dl 380 一、概 述 xx 局是江蘇省委、省直接關(guān)心和支持建立的唯一的大型重點(diǎn)綜合性新聞門戶網(wǎng)站，它承擔(dān)著正確引導(dǎo)網(wǎng)上輿論、及時(shí)傳播江蘇信息、匯集全省新聞資源、全面拓展網(wǎng)絡(luò)服務(wù)的職能。易寶北信在網(wǎng)站建設(shè)方面有雄厚的技術(shù)實(shí)力和很多成功經(jīng)驗(yàn)，愿全力支持 xx 局的網(wǎng)站建設(shè)。我們相信， xx 局領(lǐng)導(dǎo)的超前意識和科學(xué)決策，加上易寶 北信的核心技術(shù)和成功經(jīng)驗(yàn)，我們能夠建成一個(gè)具有 ―實(shí)用性、安全性、可靠性、方便性、擴(kuò)展性、先進(jìn)性、標(biāo)準(zhǔn)化 ‖的 xx 局網(wǎng)站業(yè)務(wù)支撐平臺，圓滿完成網(wǎng)站改造建設(shè)工程的設(shè)計(jì)目標(biāo)。 通過 xx 局與易寶北信的合作，充分運(yùn)用易寶北信在網(wǎng)站建設(shè)方面的實(shí)力和經(jīng)驗(yàn)，整合后的 xx 局將實(shí)現(xiàn)內(nèi)容管理平臺、信息服務(wù)平臺、業(yè)務(wù)管理平臺以及商務(wù)服務(wù)平臺的統(tǒng)一，從而實(shí)現(xiàn)新聞的實(shí)時(shí)發(fā)布、信息的快速傳播、內(nèi)容的有效整合、資源的便捷共享、社區(qū)的即時(shí)交流、服務(wù)的雙向互動(dòng)，成為江蘇新聞在網(wǎng)絡(luò)上最權(quán)威的媒體，江蘇全省新聞信息資源的匯集之地，同時(shí) xx 局還將作為 一個(gè)可靠的網(wǎng)絡(luò)技術(shù)平臺，為江蘇全省各新聞媒體上網(wǎng)提供廣泛服務(wù)。改造后的 xx 局的系統(tǒng)要求網(wǎng)絡(luò)結(jié)構(gòu)更加安全合理、服務(wù)器架構(gòu)更加穩(wěn)定實(shí)用、應(yīng)用系統(tǒng)更加方便可靠、業(yè)務(wù)系統(tǒng)更加快速高效。整個(gè)系統(tǒng)應(yīng)包含以下幾個(gè)子部分： 網(wǎng)絡(luò)管理系統(tǒng)：包括網(wǎng)絡(luò)結(jié)構(gòu)、服務(wù)器架構(gòu)與有關(guān)硬件設(shè)備部署的整合設(shè)計(jì)。 應(yīng)用管理系統(tǒng)：包括 web 服務(wù)、數(shù)據(jù)庫服務(wù)、應(yīng)用服務(wù)、郵件服務(wù)的整合設(shè)計(jì)； 業(yè)務(wù)管理系統(tǒng)：包括網(wǎng)站內(nèi)容管理、社區(qū)論壇、資源管理、視頻點(diǎn)播、短信娛樂、廣告管理等業(yè)務(wù)內(nèi)容的整合設(shè)計(jì)； 網(wǎng)絡(luò)安全系統(tǒng)：包括數(shù)據(jù)存儲備份恢復(fù)、系統(tǒng)監(jiān)控、流量分析、應(yīng)用審計(jì)等網(wǎng)絡(luò)安全的整合設(shè)計(jì)； 二、需求分析 異構(gòu)系統(tǒng) 根據(jù) xx 局提供的資料，目前所使用的服務(wù)器配置如下： 序號 型號 操作系統(tǒng) 配置 1 ibmrs6000h80 aix cpu： 內(nèi)存： 2g 2 ibmrs6000h80 aix cpu： 內(nèi)存： 1g 3 機(jī)架服務(wù)器 windows 2021 cpu： 內(nèi)存： 1g 4 ibmfinity7100 freebsd cpu： 內(nèi)存： 1g 5 ibm finity 5600 linux cpu： 內(nèi)存： 1g 6 自配 pc機(jī) windows 2021 cpu： 內(nèi)存： 512m 7 xseries 255 linux cpu： 2 內(nèi)存： 1g 8 浪潮 nl 120p windows 2021 cpu： 內(nèi)存： 從上表可以看出，在僅有的 8 臺服務(wù)器中，存在小型機(jī)、塔式服務(wù)器、機(jī)架服務(wù)器、 pc 機(jī)等多種機(jī)型，從配置上看，沒有任何兩臺機(jī)器是完全相同的， 8 臺服務(wù)器中并存了 4 種操作系統(tǒng)（ aix、 windows 202 freebsd、 linux），這給系 統(tǒng)管理帶來了極大的不便。 首先，從管理難度上看，可以按 aix、 freebsd、 linux、 windows 2021 排序，排序越靠前的系統(tǒng)，精通的人越少，管理成本越高，而同時(shí)精通四種系統(tǒng)的人成本就更是可想而知。如果在低成本下勉強(qiáng)進(jìn)行維護(hù)，則系統(tǒng)的穩(wěn)定性、安全性都無法得到保證，長期持續(xù)，整個(gè)網(wǎng)站的硬件基礎(chǔ)令人擔(dān)憂。 其次，從互換性上看，如果一臺服務(wù)器發(fā)生故障，很難用其它服務(wù)器直接替換，必然會延長故障修復(fù)時(shí)間，造成網(wǎng)站長時(shí)間處于不可用狀態(tài)，嚴(yán)重影響用戶使用及 xx 局的形象。 第三，從服務(wù)器的利用角度看，兩臺最健壯的 rs6000 小型機(jī)不是用于最核心的數(shù)據(jù)庫服務(wù)，而是用于 web 相關(guān)服務(wù)，其卓越性能無法得到發(fā)揮，反而由于不是采用分布式負(fù)載均衡結(jié)構(gòu)而嚴(yán)重影響了用戶訪問速度和網(wǎng)站的大訪問量承載能力。必然造成網(wǎng)站訪問速度日益下降。其效果就如同用推土機(jī)參加賽車一樣，其馬力再強(qiáng)勁也沒有用處，因?yàn)樗脑O(shè)計(jì)用途就不是在速度上而是在耐力上。 從 alexa 網(wǎng)站（ ，世界上最權(quán)威的第三方網(wǎng)站評價(jià)站點(diǎn)）上 xx 局的排名（近三個(gè)月的平均排名為 3108）來看，雖然與地方新聞門戶的領(lǐng)頭羊千龍網(wǎng)（近三個(gè)月的平均排名為 333）和東 方網(wǎng)（近三個(gè)月的平均排名為 698）還有相當(dāng)大的差距，但也應(yīng)該是屬于日訪問量過百萬pageview 的大型新聞門戶網(wǎng)站，目前的網(wǎng)站結(jié)構(gòu)與這種高強(qiáng)度的訪問要求是極不相稱的。如果 xx局的下一步目標(biāo)是趕超東方網(wǎng)和千龍網(wǎng)的話，就更需要合理調(diào)整網(wǎng)站的整體硬件結(jié)構(gòu)，以適應(yīng)每天過千萬 pageview 的訪問量。 所有超大型網(wǎng)站在 web 服務(wù)層的結(jié)構(gòu)基本是一致的，即 cache 加上機(jī)架服務(wù)器群負(fù)載均衡。 首先，專用的 cache 服務(wù)器對大訪問量的承載力要遠(yuǎn)遠(yuǎn)超過普通服務(wù)器（通常可以達(dá)到 1： 5 以上），因此，在服務(wù)器群前端使用專用的 cache 服務(wù)器是使網(wǎng)站能夠適應(yīng)千萬級訪問量的最佳解決方案。 其次， web 服務(wù)器通常都是采用多臺配置相同的機(jī)架式服務(wù)器（每臺價(jià)格均在 10 萬元以下）通過專用的負(fù)載均衡設(shè)備形成 web 服務(wù)器群，從而很好地將用戶訪問流量平均分配到各個(gè)服務(wù)器上，便于隨時(shí)擴(kuò)展，也便于故障排除，因?yàn)槿魏我慌_服務(wù)器發(fā)生故障并被撤離的時(shí)候都不會影響到整個(gè)網(wǎng)站的訪問，從而在最大程度上縮短了整個(gè)網(wǎng)站的不可用時(shí)間。 而對于應(yīng)用核心的數(shù)據(jù)庫服務(wù)器，通常會采用雙機(jī)熱備援，即兩臺數(shù)據(jù)庫實(shí)時(shí)同步，互為備份，當(dāng)一臺發(fā)生故障時(shí)，另一臺自動(dòng)接管它的全部服務(wù)，確保所 有應(yīng)用不間斷運(yùn)行。 當(dāng)然，最重要的一點(diǎn)還是要及時(shí)進(jìn)行數(shù)據(jù)備份，無論是數(shù)據(jù)庫還是網(wǎng)頁、文件都必須定時(shí)備份，以便在意外情況下可以在最短的時(shí)間內(nèi)恢復(fù)，同時(shí)保證數(shù)據(jù)損失最小。 目前的結(jié)構(gòu)與建議結(jié)構(gòu)相差太遠(yuǎn)，如果不花大力氣徹底改造的話，上述問題將會不斷加重，直至整個(gè)網(wǎng)站完全癱瘓。 首先，要下決心統(tǒng)一硬件平臺，盡管保護(hù)投資是非常重要的，但如果以網(wǎng)站的未來發(fā)展為代價(jià)顯然是不值得的。 ibm rs6000 小型機(jī)盡管已過了保修期，但其性能仍然非常卓越，對于金融領(lǐng)域的建設(shè)項(xiàng)目非常有益，可以考慮與本地待建的金融項(xiàng)目進(jìn)行相應(yīng)協(xié)商， 將兩臺小型機(jī)置換成機(jī)架服務(wù)器，這對于建設(shè)雙方而言都是非常有益的做法。 如果置換困難的話，也建議將 rs6000 作為數(shù)據(jù)庫服務(wù)器， rs6000 對于 oracle 數(shù)據(jù)庫的支持要遠(yuǎn)勝于 windows 2021，但相應(yīng)的成本會增加很多，維護(hù)起來的難度也將成倍加大。這個(gè)方法在技術(shù)上是可行的，但在維護(hù)上需要斟酌。 從網(wǎng)站的長遠(yuǎn)發(fā)展看，建議將兩臺小型機(jī)單獨(dú)考慮作為未來的電子商務(wù)類的盈利性支撐平臺，在本次改造中將其上面的應(yīng)用完全剝離出來；并重新規(guī)劃整個(gè)網(wǎng)站的硬件平臺，以 ibm/hp/dell 的機(jī)架式服務(wù)器完全重組，并考慮對舊設(shè) 備充分進(jìn)行利用。 其次，要統(tǒng)一操作系統(tǒng)，除了 aix以外，另外三種操作系統(tǒng)都可以考慮。 單從安全性角度出發(fā)， freebsd 是比較好的選擇，目前新浪、網(wǎng)易等綜合門戶使用較多，但是熟悉該系統(tǒng)的人相對較少。 由于 redhat 以后將不會再推免費(fèi)的 linux，而且其安全性和穩(wěn)定性也并不是比 windows 高出很多，因此完全使用 linux也需要慎重考慮。 windows 盡管口碑較差，但在實(shí)際應(yīng)用中很多大的門戶中仍有大量的 windows 服務(wù)器存在，包括搜狐、千龍等，如果有比較認(rèn)真負(fù)責(zé)的系統(tǒng)管理員， windows 2021 及 其后續(xù)產(chǎn)品的綜合成本還是最低的。而且包括 windows 系統(tǒng)資源占用過高等問題都可以通過比較專業(yè)的調(diào)優(yōu)工作得到大幅度改善。一臺 windows 2021 的 iis 服務(wù)器在調(diào)優(yōu)前后的性能差異可以高達(dá)數(shù)十倍。 建議采用 freebsd 或 windows 2021 中的一種統(tǒng)一操作系統(tǒng)，以降低整個(gè)網(wǎng)站的維護(hù)成本。 異構(gòu)應(yīng)用 xx 局對外提供了很多種服務(wù)，其中社區(qū)、論壇、婚介、郵件等均是使用 asp寫的程序，而軟件下載則是使用 jsp 寫的程序， xx 局內(nèi)部的發(fā)布系統(tǒng) iflow 也是基于的系統(tǒng)。 為了保證跨平臺應(yīng)用和未來的遷移擴(kuò) 展，還是建議將程序?qū)懗砂姹?，目前越來越多?web 程序員均精通 asp、 jsp、 php 等多種腳本語言，改寫起來非常方便。 當(dāng)然，應(yīng)用程序的異構(gòu)并不是太大問題，大多數(shù)網(wǎng)站都存在這種情況，但是應(yīng)用程序編寫的水平高低常會造成應(yīng)用層安全漏洞，從而威脅整個(gè)網(wǎng)站的安全，如果在成本有限的情況下，考慮低成本的 php也不失為好的方案。 異構(gòu)數(shù)據(jù) 發(fā)布系統(tǒng) iflow 使用的數(shù)據(jù)庫是 windows 版的 oracle，而網(wǎng)站使用的動(dòng)網(wǎng)論壇則使用的是 access或 sqlserver，如果按照清華萬博的建議，將會把發(fā)布系統(tǒng)數(shù)據(jù)庫遷移到 mysql 上。 從數(shù)據(jù)庫的性能上而言， oracle是當(dāng)之無愧的最佳選擇。而 ibm的 db2和微軟的 sqlserver 2021也表現(xiàn)不錯(cuò)。千龍網(wǎng)到 2021 年 5 月以后才將部分?jǐn)?shù)據(jù)庫開始向 oracle 遷移，而此前的應(yīng)用一直是在 sql server 2021 上運(yùn)行，效能是令人滿意的。 而 mysql 和 access 在多數(shù)方面與上述的大型數(shù)據(jù)庫是無法比擬的，例如可以大幅度提升數(shù)據(jù)庫查詢性能的存儲過程、可以防止數(shù)據(jù)庫錯(cuò)誤發(fā)生的事務(wù)處理等高級性能它們都不支持。 mysql 的下一個(gè)版本雖然聲稱會加入這些性能，但未經(jīng)過長期考驗(yàn)的數(shù) 據(jù)庫性能是不能令人信服的。 因此將 oracle 數(shù)據(jù)庫換成 mysql 是不明智的，應(yīng)該說是一種倒退。而且將三個(gè)月以前的數(shù)據(jù)切斷也不是好的做法。要知道對于一個(gè)新聞網(wǎng)站而言組織歷史數(shù)據(jù)制作專題報(bào)道是非常重要的吸引網(wǎng)民的手段，也是作為新聞門戶的立身之本。這就決定了切分歷史數(shù)據(jù)將會給編輯的工作帶來極大的不便。 與 sqlserver 自動(dòng)調(diào)優(yōu)不同的是， oracle 數(shù)據(jù)庫對人工優(yōu)化的依賴程度特別高，默認(rèn)的安裝選項(xiàng)幾乎發(fā)揮不出 oracle數(shù)據(jù)庫性能的十分之一，而且 oracle是支持群集和海量數(shù)據(jù)的最佳選擇，如果想快速發(fā)展的話， 更沒有理由不使用它了。 xx 局目前數(shù)據(jù)庫內(nèi)的數(shù)據(jù)量為 39萬條，目前所購小型機(jī)已過了三年保修期，按 xx 局運(yùn)行三年算，平均每天的新聞發(fā)稿量不到 340 條（當(dāng)然發(fā)稿量一定是個(gè)漸近的數(shù)字，但就算平均到一年，每天也不過 1050 條左右），這一數(shù)字與千龍網(wǎng)、東方網(wǎng)每天的 30005000 條和新浪、搜狐每天的500010000 條相比，根本算不了什么，因此絕不可能是因?yàn)閿?shù)據(jù)庫本身的性能影響了系統(tǒng)的速度。 如果 iflow 系統(tǒng)可以從 oracle 移植到 mysql 上的話，那只能說明這套系統(tǒng)根本就沒有就 oracle 數(shù)據(jù)庫做過優(yōu)化，沒 有利用任何大型數(shù)據(jù)庫提供的高級功能，因此其訪問效率必然十分低下。 網(wǎng)站結(jié)構(gòu) 事實(shí)上財(cái)經(jīng)頻道根本就不存在江蘇頻道里的內(nèi)容。這說明了 iflow 生成的目錄結(jié)構(gòu)存在非常致命的問題，就是在同一天所有頻道的內(nèi)容都被混放在同一個(gè)目錄中，然后通過不同的虛擬主機(jī)讓用戶產(chǎn)生不同頻道的錯(cuò)覺，事實(shí)上根本沒有辦法把這些文件拆分開。 這樣的話，就沒有辦法輕易實(shí)現(xiàn)象新浪、搜狐、千龍那樣的分布式結(jié)構(gòu)，即每個(gè)頻道都可以單獨(dú)地采用一臺或幾臺服務(wù)器，從而承載每天千萬級甚至是億級的訪問量。這將會給未來的系統(tǒng)改造帶來極大的麻煩。 雖然使用完 全對等的多臺 web 服務(wù)器也可以實(shí)現(xiàn)負(fù)載均衡，但過度的冗余最終還是會影響到整個(gè)網(wǎng)站的性能。而且根據(jù)經(jīng)驗(yàn)，這一拆分工作是十分艱巨的，估計(jì)至少會花費(fèi)一個(gè)程序員三、四個(gè)月的時(shí)間。 這個(gè)問題也是必須解決的問題，是大型網(wǎng)站發(fā)展的重大瓶頸問題。 內(nèi)容海量 根據(jù)剛才的分析， xx 局目前的新聞更新量并不是很