【正文】 XXX公司存儲系統(tǒng)實(shí)施方案2016年3月 73 / 73 目 錄1. 項(xiàng)目實(shí)施內(nèi)容 5 存儲系統(tǒng)架構(gòu)示意圖 6 本項(xiàng)目設(shè)備硬件配置 62. 存儲系統(tǒng)實(shí)施基礎(chǔ)配置 7 雙活數(shù)據(jù)中心存儲實(shí)現(xiàn)模式 7 光纖通道交換機(jī)端口連接表 8 VPLEX端口作用描述 9 VPLEX端口的使用 9 存儲設(shè)備線路連接描述 9 存儲設(shè)備端口命名規(guī)則 103. SAN存儲規(guī)劃 10 存儲設(shè)備連接線纜數(shù)量及種類 10 存儲設(shè)備IP 地址配置 11 VPLEX的端口連接配置 114. VPLEX METRO實(shí)施步驟 12 VPLEX 前期準(zhǔn)備 12 system volumes 12 Switch zoning 13 Backend storage provisionq 13 VPLEX initial setup 13 Configip address and hostname of VPLEX 13 Connect to management server 13 entering the VPLEXCLI 14 set the management server ipaddress 14 change the hostname of VPLEX 14 check software version 14 use EZsetup to initialize the VPLEX1 15 Start EZsetup 15 Configure the first cluster 15 Chose the local authentication 15 Configure event notification 15 Configure send system report to EMC 16 Configure performance statistics collector 16 Generate the certificate 16 Backend storage discovery 17 create metadata volume 17 verify if metadata volume is successfully created 18 create metadata volume backups 18 enable FE port 18 use EZsetup to initialize the VPLEX2 18 Connect to VPLEX2 18 Sychronize the time on the clusters 18 Start EZsetup on cluster2 19 Configure the Metadata volume and backup of VPLEX2 19 Complete configuration of cluster1 19 Complete configuration of cluster2 19 Join the clusters 19 Create logging volumes 20 Check the cluster health 21 VPLEX backend storage connectivity verify 21 Claim the data volume 215. ISILON的實(shí)施步驟 23 集群初始化 23 節(jié)點(diǎn)加入 37 系統(tǒng)健康檢查 38 OneFS升級 38 安裝補(bǔ)丁包 38 系統(tǒng)微碼升級 38 硬盤微碼升級 38 管理界面登錄 39 保護(hù)級別設(shè)置 39 網(wǎng)絡(luò)設(shè)置 40 內(nèi)網(wǎng)設(shè)置 41 外網(wǎng)設(shè)置 41 目錄認(rèn)證服務(wù) 41 SMB共享規(guī)劃 41 NFS共享規(guī)劃 436 DATADOMAIN配置步驟 45 DataDomain配置之前實(shí)施內(nèi)容 45 DataDomain VTL配置 467 存儲設(shè)備的使用示范 55 操作流程 55 操作示例 56 光纖交換機(jī)操作部分 56 EMC VNX7600操作部分 59 VPLEX 操作部分 621. 項(xiàng)目實(shí)施內(nèi)容XX公司雙活數(shù)據(jù)中心災(zāi)備項(xiàng)目采用EMC VPLEX METRO解決方案，實(shí)現(xiàn)院區(qū)主機(jī)房和災(zāi)備機(jī)房容災(zāi)。具體規(guī)劃如下：1. 主機(jī)房與災(zāi)備機(jī)房分別配置1套EMC VPLEX虛擬化網(wǎng)關(guān)設(shè)備，用于部署EMC VPLEX Metro集群，VPLEX 集群間采用裸光纖連接。2. 主機(jī)房和容災(zāi)機(jī)房分別配置1套EMC VNX7600統(tǒng)一存儲系統(tǒng)，VPLEX將底層的存儲設(shè)備虛擬給前端的主機(jī)，所有重要數(shù)據(jù)由VPLEX在兩機(jī)房間同步鏡像，組建雙活數(shù)據(jù)中心；3. 主機(jī)房配置1套EMC Isilon橫向擴(kuò)展NAS存儲，專用于圖書館數(shù)據(jù)平臺：為學(xué)院圖書館下屬的多個(gè)系統(tǒng)提供更高性能、靈活可靠的數(shù)據(jù)存儲服務(wù)。全面提升圖書館數(shù)據(jù)服務(wù)的性能與穩(wěn)定性，滿足未來圖書館數(shù)據(jù)快速增長的需要。4. 主機(jī)房配置1套EMC Networker備份管理軟件：搭建數(shù)據(jù)備份平臺，實(shí)現(xiàn)備份資源的統(tǒng)一管理和分配；5. 主機(jī)房配置1套EMC Data Domain 2500 備份專用設(shè)備，具備在線重復(fù)數(shù)據(jù)消除功能，并配置VTL軟件許可。系統(tǒng)數(shù)據(jù)通過8Gb FCSAN網(wǎng)絡(luò)進(jìn)行高速備份，在線消重后存入DataDomain，從而實(shí)現(xiàn)高效備份與備份數(shù)據(jù)經(jīng)濟(jì)存放。6. 配置2臺EMC DS6510B光纖交換機(jī)分別部署在主機(jī)房與災(zāi)備機(jī)房，36端口激活，從而滿足SAN網(wǎng)絡(luò)連接的需要；7. 項(xiàng)目實(shí)施時(shí)，考慮到災(zāi)備機(jī)房還沒有建設(shè)完成，所有設(shè)備均部署在主機(jī)房內(nèi)；當(dāng)災(zāi)備機(jī)房投入使用后，可以將計(jì)劃部署在災(zāi)備機(jī)房的設(shè)備，逐步遷移到災(zāi)備機(jī)房中；因此在本次項(xiàng)目實(shí)施時(shí)，充分考慮了今后遷移的可行性和便捷性?？蓪?shí)現(xiàn)災(zāi)備機(jī)房設(shè)備遷移時(shí)，不影響主機(jī)房內(nèi)系統(tǒng)的正常運(yùn)行。 存儲系統(tǒng)架構(gòu)示意圖 本項(xiàng)目設(shè)備硬件配置本次配置的EMC VPLEX兩套配置簡要描述如下：l 2個(gè)SAN控制器，72GB高速數(shù)據(jù)緩存，20個(gè)8Gbps FC端口，全冗余模塊化設(shè)計(jì)，用于實(shí)現(xiàn)虛擬化存儲雙活數(shù)據(jù)保護(hù)；l 每個(gè)SAN控制器采用4核處理器，2個(gè)SAN控制器共配置8核處理器。本次配置的EMC DS6510B SAN交換機(jī)配置簡要描述如下：l 48口SAN光纖交換機(jī)，36端口激活并配置36個(gè)8Gbps SFP多模模塊。本次配置VNX 7600磁盤陣列設(shè)備描述如下l 2個(gè)SAN控制器，128GB高速數(shù)據(jù)緩存，8個(gè)8Gb FC主機(jī)接口，8個(gè)1Gb iSCSI主機(jī)接口；l 每個(gè)SAN控制器采用8核處理器，2個(gè)SAN控制器共配置16核處理器；l 配置5塊200GB SLC SSD企業(yè)級固態(tài)硬盤，20塊900GB 10K SAS企業(yè)級磁盤，60塊 4TB NLSAS企業(yè)級磁盤。本次配置的Data Domain描述如下：l 磁盤裸容量為36TB,，最大可用容量可擴(kuò)展到133TB；l 配置4個(gè)8GB光纖網(wǎng)絡(luò)接口，4個(gè)千兆網(wǎng)絡(luò)接口；l 提供VTL軟件許可， TB/hr。本次配置Isilon NAS設(shè)備描述如下：l 橫向擴(kuò)展集群NAS存儲系統(tǒng)，并行集群模式，支持100個(gè)以上NAS節(jié)點(diǎn)的擴(kuò)展能力；l 本次配置3個(gè)X210存儲節(jié)點(diǎn)數(shù)量，單節(jié)點(diǎn)磁盤裸容量為48TB，3個(gè)節(jié)點(diǎn)合計(jì)裸容量為144TB；l 每個(gè)存儲節(jié)點(diǎn)均配置獨(dú)立的處理器，單節(jié)點(diǎn)配置緩存24GB，3個(gè)節(jié)點(diǎn)配置總緩存72GB；單節(jié)點(diǎn)配置2個(gè)萬兆和2個(gè)千兆前端接口，3 個(gè)節(jié)點(diǎn)供配置6個(gè)萬兆和6個(gè)千兆前端接口，支持多用戶并發(fā)連接，并配置負(fù)載均衡功能；單節(jié)點(diǎn)配置2個(gè)40Gb Infiniband 后端互聯(lián)端口，3個(gè)節(jié)點(diǎn)共配置6個(gè)40Gb Infiniband 后端互聯(lián)端口；l 配置2臺的InfiniBand 8口交換機(jī)，專用于集群內(nèi)部通信，交換機(jī)端口速率為40Gb/s。2. 存儲系統(tǒng)實(shí)施基礎(chǔ)配置12 雙活數(shù)據(jù)中心存儲實(shí)現(xiàn)模式本次項(xiàng)目中，利用兩臺EMC VNX7600 存儲，通過使用兩條VPLEX虛擬網(wǎng)關(guān)設(shè)備，實(shí)現(xiàn)了EMC VPLEX METRO雙活的解決方案。EMC VPLEX METRO架構(gòu)拓?fù)涫疽鈭D如下 光纖通道交換機(jī)端口連接表DS_6510 A(主機(jī)房）0123C1_A0FC00C1_B0FC00C1_A1FC00C1_B1FC004567C2_A0FC00C2_B0FC00C2_A1FC00　C2_B1FC00891011C1_A2FC00C1_B2FC00VNX7600(主)SPA00　VNX7600(主)SPB0012131415C2_A2FC00C2_B2FC00VNX7600(備)SPA00VNX7600(備)SPB00　303132DDA1DDB1備份服務(wù)器DS_6510B（主機(jī)房）0123C1_A0FC01C1_B0FC01C1_A1FC01C1_B1FC014567C2_A0FC01C2_B0FC01C2_A1FC01　C2_B1FC01891011C1_A2FC01C1_B2FC01VNX7600(主)SPA01　VNX7600(主)SPB0112131415C2_A2FC01C2_B2FC01VNX7600(備)SPA01VNX7600(備)SPB01　3031DDA2DDB2 VPLEX端口作用描述u VPLEX 端口分類如上圖：u VPLEX 每個(gè)引擎分為兩個(gè)Director，即控制器。u FE代表前端端口，用來連接前端服務(wù)器。模塊插槽為每個(gè)Director的IOM 0號槽位，即為A0和B0。u BE代表后端端口，用來連接后端存儲。模塊插槽為每個(gè)Director的IOM 1號槽位，即為A1和B1u 每個(gè)Director的IOM 2號槽位為WANCOM端口，用來連接兩個(gè)數(shù)據(jù)中心VPLEX內(nèi)部數(shù)據(jù)同步。u IOM 3號槽位為引擎內(nèi)部的兩個(gè)Director內(nèi)部數(shù)據(jù)交換。u 便于理解，站在服務(wù)器的角度來看VPLEX，可以將它看做一臺存儲。從存儲角度來看VPLEX,可以將其看做為一臺服務(wù)器。 VPLEX端口的使用本項(xiàng)目中vplex版本為vs2，每臺vplex有1個(gè)引擎每個(gè)引擎有兩個(gè)控制器。每臺主機(jī)配置了2張HBA卡用于連接VPLEX，VPLEX的后端口用于連接EMC VNX 5600。 存儲設(shè)備線路連接描述 每個(gè)Director的IOM 0、IOM IOM2號槽位的0號和1號端口分別連接兩臺光纖交換機(jī)。因交換機(jī)配置為別名ZONE，所以連接光纖交換機(jī)的端口號可以忽略。VNX 7600分為兩個(gè)控制器SPA和SPB，站在存儲背面左手邊為SPB,右手邊為SPA，每個(gè)SP的0、1號端口分別連接兩臺光纖交換機(jī)，同為別名ZONE。DataDomain的兩個(gè)光纖通道接口，分別連接到兩臺光纖通道交換機(jī)中；作為備份服務(wù)的物理主機(jī)，通過自身配置的HBA卡，連接到其中一臺光纖通道交換機(jī)中，以此實(shí)現(xiàn)LANFREE的備份方式。使用FC SAN架構(gòu)提供存儲空間的每臺主機(jī)配置兩塊HBA卡，兩塊HBA卡分別連接兩個(gè)光纖交換機(jī)。 存儲設(shè)備端口命名規(guī)則VPLEX的端口命名規(guī)則：C1A0FC00代表Cluster1的（數(shù)據(jù)中心，C2為容災(zāi)中心）引擎1的director A的A0模塊的第0號端口。EMC VNX 7600的端口命名規(guī)則：VNX7600_A_F0代表控制器A的FC第0口Zone的命名規(guī)則：VPLEXA_C1A1FC00_VNX7600_A_F0代表VPLEXA的引擎1的director A的A1模塊的0口到VNX 7600控制器A的0號端口。3. SAN存儲規(guī)劃本項(xiàng)目本次實(shí)施中，只配置了主機(jī)房的兩臺SAN交換機(jī)，vplex到一臺交換機(jī)需要至少2個(gè)FE，2個(gè)BE，2個(gè)Wan ，每臺存儲至少需要4個(gè)端口。123 存儲設(shè)備連接線纜數(shù)量及種類光纖數(shù)量FromTo光纖數(shù)量類型VPLEX_A生產(chǎn)中心SAN交換機(jī)12條多模EMC VNX 7600生產(chǎn)中心SAN交換機(jī)2條多模VPLEX_B災(zāi)備中心SAN交換機(jī)12條多模EMC VNX 7600災(zāi)備中心SAN交換機(jī)2條多模Isilon服務(wù)器匯聚交換機(jī)3條多模Data Domain生產(chǎn)中心SAN交換機(jī)2條多模網(wǎng)線數(shù)量設(shè)備名網(wǎng)線數(shù)量IP地址 備注VPLEX_A11個(gè)生產(chǎn)機(jī)房VPLEX管理地址VPLEX_B11個(gè)容災(zāi)機(jī)房VPLEX管理地址VNX 760022管理IPDS6510B SAN222個(gè)管理IP 存儲設(shè)備IP 地址配置設(shè)備名IP地址用戶名密碼備注VPLEX_C1(主）serviceMi@Dim7T瀏覽器需安裝JREVPLEX_C2（備）serviceMi@Dim7TDS6510B_A （主機(jī)房）adminpasswordDS6510B_B （主機(jī)房）adminpasswordVNX 7600 SPA(主）adminpasswordVNX 7600 SPB(備）ad