【正文】 考慮配置存儲(chǔ)DRS，使數(shù)據(jù)存儲(chǔ)使用量保持在80%的均衡水平。u 對(duì)于基于IP的存儲(chǔ)，應(yīng)使用單獨(dú)的專用網(wǎng)絡(luò)或VLAN以隔離存儲(chǔ)流量，避免與其他流量類型爭(zhēng)用資源，從而可以降低延遲并提高性能。u 對(duì)于大多數(shù)應(yīng)用，除非存在對(duì)RDM的特定需求，否則請(qǐng)使用VMDK磁盤。 共享存儲(chǔ)邏輯規(guī)劃考慮采用本地存儲(chǔ)將無法形成整個(gè)虛擬化集群資源池，因此無法有效地使用vSphere虛擬化環(huán)境的高可用，靈活配置等功能。在設(shè)計(jì)存儲(chǔ)架構(gòu)時(shí)應(yīng)該充分考慮到冗余和性能，因此存儲(chǔ)架構(gòu)的選擇根據(jù)國家和各省級(jí)數(shù)據(jù)中心整體應(yīng)用對(duì)存儲(chǔ)的IOPS和吞吐量的需求進(jìn)行規(guī)劃，涉及到端到端的主機(jī)適配器選擇、控制器和端口數(shù)量選擇以及磁盤數(shù)量和RAID方式選擇等。圖：每臺(tái)服務(wù)器的存儲(chǔ)連接示意圖針對(duì)上圖的一些說明如下。u 底層LUN的需求根據(jù)實(shí)際虛擬機(jī)應(yīng)用對(duì)存儲(chǔ)IOPS的實(shí)際需求進(jìn)行規(guī)劃。u 對(duì)于IO密集型的應(yīng)用盡量采用單獨(dú)的VMFS存儲(chǔ)，避免在存儲(chǔ)端與其他應(yīng)用產(chǎn)生IO爭(zhēng)用。u 通常情況下1~2TB的LUN大小具有較好的性能和可管理性。u 對(duì)于雙活A(yù)LUA磁盤陣列（非雙活磁盤陣列），為了防止鏈路抖動(dòng)，對(duì)于每個(gè)LUN在同一時(shí)間配置只有一個(gè)ESXi服務(wù)器通過一個(gè)存儲(chǔ)處理器進(jìn)行訪問，這就需要在多路徑策略選擇時(shí)設(shè)置為MRU（最近使用策略），該策略可以保證只有在某個(gè)路徑故障時(shí)才啟用另一個(gè)存儲(chǔ)處理器連接LUN。 存儲(chǔ)空間規(guī)劃規(guī)劃LUN容量時(shí)，建議每個(gè)LUN運(yùn)行10到20個(gè)VM(數(shù)據(jù)事務(wù)類應(yīng)用可以適當(dāng)減少)，并且每個(gè)LUN的使用量不超過容量的80%。LUN容量規(guī)劃的公式如下所示。因此在構(gòu)建VMFS文件系統(tǒng)的空間時(shí)應(yīng)該充分考慮在其上運(yùn)行的虛擬機(jī)數(shù)量和可增長空間，在規(guī)劃時(shí)將LUN的空間預(yù)留充足。我們建議東莞銀行客戶采用如下的存儲(chǔ)配置。 存儲(chǔ)分層規(guī)劃每個(gè)存儲(chǔ)層具有不同的性能、容量和可用性特征，只要不是每個(gè)應(yīng)用都需要昂貴、高性能、高度可用的存儲(chǔ)，設(shè)計(jì)不同的存儲(chǔ)層將十分經(jīng)濟(jì)高效。圖：存儲(chǔ)分層實(shí)例在規(guī)劃存儲(chǔ)分層時(shí)，我們主要考量應(yīng)用和服務(wù)的如下存儲(chǔ)特征。u 考慮任何現(xiàn)有的服務(wù)級(jí)別協(xié)議(SLA)u 數(shù)據(jù)在信息生命周期中可能會(huì)在存儲(chǔ)層之間移動(dòng)基于上述原則，我們?yōu)闁|莞銀行客戶所做的存儲(chǔ)分層規(guī)劃如下所示。 數(shù)據(jù)存儲(chǔ)群集規(guī)劃數(shù)據(jù)存儲(chǔ)以及與數(shù)據(jù)存儲(chǔ)群集關(guān)聯(lián)的主機(jī)必須符合特定要求，才能成功使用數(shù)據(jù)存儲(chǔ)群集功能。u 數(shù)據(jù)存儲(chǔ)群集必須包含類似的或可互換的數(shù)據(jù)存儲(chǔ)。但是，下列類型的數(shù)據(jù)存儲(chǔ)不能共存于一個(gè)數(shù)據(jù)存儲(chǔ)群集中。 在同一個(gè)數(shù)據(jù)存儲(chǔ)群集中，不能組合使用NFS和VMFS數(shù)據(jù)存儲(chǔ)。 在同一個(gè)啟用了存儲(chǔ)DRS的數(shù)據(jù)存儲(chǔ)群集中，不能結(jié)合使用復(fù)制的數(shù)據(jù)存儲(chǔ)和非復(fù)制的數(shù)據(jù)存儲(chǔ)。如果數(shù)據(jù)存儲(chǔ)群集中的數(shù)據(jù)存儲(chǔ)連接到ESX/ESXi ，則存儲(chǔ)DRS不會(huì)運(yùn)行。u 最佳做法是，啟用了硬件加速的數(shù)據(jù)存儲(chǔ)不能與未啟用硬件加速的數(shù)據(jù)存儲(chǔ)放在同一個(gè)數(shù)據(jù)存儲(chǔ)群集中?；谏鲜鲈瓌t，我們建議東莞銀行客戶采用如下數(shù)據(jù)存儲(chǔ)集群規(guī)劃。網(wǎng)絡(luò)設(shè)計(jì)必須經(jīng)過合理優(yōu)化，以滿足應(yīng)用、服務(wù)、存儲(chǔ)、管理員和用戶的各種需求。本小節(jié)將根據(jù)東莞銀行客戶的生產(chǎn)環(huán)境，對(duì)網(wǎng)絡(luò)資源進(jìn)行整體規(guī)劃，包括虛擬交換機(jī)，網(wǎng)卡綁定等。u 連接要求u 帶寬要求u 延遲要求u 可用性要求u 成本要求 216。u 構(gòu)建模塊化網(wǎng)絡(luò)解決方案，該方案可隨時(shí)間的推移不斷擴(kuò)展以滿足組織的需求，使得用戶無需替換現(xiàn)有的網(wǎng)絡(luò)基礎(chǔ)架構(gòu)，進(jìn)而降低成本。u VLAN可減少所需的網(wǎng)絡(luò)端口和電纜數(shù)量，但需要得到物理網(wǎng)絡(luò)基礎(chǔ)架構(gòu)的支持。對(duì)于每一個(gè)虛擬交換機(jī)vSwitch應(yīng)該配置至少兩個(gè)上行鏈路物理網(wǎng)絡(luò)端口。如果移除所有正在運(yùn)行的硬件，虛擬機(jī)仍可互相通信。u 連接到同一vSphere標(biāo)準(zhǔn)交換機(jī)或分布式交換機(jī)的每個(gè)物理網(wǎng)絡(luò)適配器還應(yīng)該連接到同一物理網(wǎng)絡(luò)。u 實(shí)施網(wǎng)絡(luò)組件和路徑冗余，以支持可用性和負(fù)載分配。u 對(duì)于多網(wǎng)口的冗余配置應(yīng)該遵循配置在不同PCI插槽間的物理網(wǎng)卡口之間。建議采用千兆以太網(wǎng)交換網(wǎng)絡(luò)，避免網(wǎng)絡(luò)瓶頸。簡(jiǎn)單的方法是通過在虛擬機(jī)網(wǎng)絡(luò)vSwitch或vPortGroup上通過對(duì)多塊1GbE端口捆綁負(fù)載均衡實(shí)現(xiàn)。u 為了保護(hù)大部分敏感的虛擬機(jī)，要在虛擬機(jī)中部署防火墻，以便在帶有上行鏈路（連接物理網(wǎng)絡(luò)）的虛擬網(wǎng)絡(luò)和無上行鏈路的純虛擬網(wǎng)絡(luò)之間路由。 虛擬交換機(jī)規(guī)劃為每臺(tái)vSphere服務(wù)器規(guī)劃的虛擬交換機(jī)配置如下。u 所選用的網(wǎng)卡必須在vSphere服務(wù)器的網(wǎng)絡(luò)I/O設(shè)備兼容列表里，請(qǐng)從。u 對(duì)于虛擬機(jī)應(yīng)用的網(wǎng)絡(luò)，為了確保虛擬機(jī)在執(zhí)行了vMotion遷移到另一物理主機(jī)時(shí)保持其原有的VLAN狀態(tài)，（VST）方式。u 對(duì)于虛擬機(jī)存儲(chǔ)，采用IPSAN網(wǎng)絡(luò)，通過虛擬機(jī)vmkernel包含的PSA多路徑模塊進(jìn)行存儲(chǔ)路徑匯聚及故障策略選擇。圖：主機(jī)網(wǎng)絡(luò)連接示意圖216。而通過使用來自多個(gè)網(wǎng)卡和主板接口的端口配置網(wǎng)卡綁定可進(jìn)一步減少單點(diǎn)故障的數(shù)量。圖：網(wǎng)卡綁定示意圖 可用性規(guī)劃本次規(guī)劃充分考慮了虛擬化環(huán)境的可用性設(shè)計(jì)，例如：在網(wǎng)絡(luò)層面和存儲(chǔ)層面分別利用了VMware vSphere內(nèi)置的網(wǎng)絡(luò)冗余和存儲(chǔ)多路徑控制確保高可用。本小節(jié)將根據(jù)東莞銀行客戶的生產(chǎn)環(huán)境，對(duì)可用性進(jìn)行整體規(guī)劃。組件可用性故障影響維護(hù)正在運(yùn)行的工作負(fù)載vSphere 主機(jī)在高可用性集群中配置所有vSphere主機(jī)，最少應(yīng)實(shí)現(xiàn)n+1冗余。如果某臺(tái)主機(jī)出現(xiàn)故障，vSphere HA可在13秒內(nèi)檢測(cè)到故障，并開始在集群內(nèi)的其他主機(jī)上啟動(dòng)該主機(jī)的虛擬機(jī)。VMware建議采用一種名為“集群資源百分比”的接入控制策略，因?yàn)榇瞬呗圆粌H十分靈活，而且能夠?qū)崿F(xiàn)資源可用性。在vCenter中，可以定義用于監(jiān)控主機(jī)系統(tǒng)運(yùn)行狀況的規(guī)則。當(dāng)檢測(cè)到I/O沖突時(shí)，vSphere Storage I/O Control會(huì)自動(dòng)調(diào)節(jié)主機(jī)和虛擬機(jī)，確保在數(shù)據(jù)存儲(chǔ)中的虛擬機(jī)之間公平分配磁盤份額。Storage I/O Control會(huì)利用份額分配機(jī)制來確保每個(gè)虛擬機(jī)獲得應(yīng)得的資源。通過vSphere DRS或vSphere Storage DRS，無需停機(jī)即可在主機(jī)之間遷移虛擬機(jī)。Storage I/O Control會(huì)根據(jù)虛擬機(jī)和vSphere主機(jī)相應(yīng)的份額授權(quán)容量或配置的最大IOPS數(shù)量來調(diào)節(jié)虛擬機(jī)和vSphere主機(jī)。這包括管理和vMotion網(wǎng)絡(luò)。無影響。需要配置故障切換和故障恢復(fù)以及相應(yīng)的物理設(shè)置（如PortFast）。基于存儲(chǔ)供應(yīng)商的設(shè)計(jì)指導(dǎo)準(zhǔn)則來甄選路徑選擇插件。即使發(fā)生故障切換，也不會(huì)導(dǎo)致服務(wù)中斷。vCenter Server Heartbeat 針對(duì)vCenter Server提供一個(gè)集群解決方案，可在節(jié)點(diǎn)之間實(shí)現(xiàn)全自動(dòng)故障切換，幾乎可實(shí)現(xiàn)零停機(jī)。在物理機(jī)發(fā)生故障時(shí)，可以被集群中的其他物理節(jié)點(diǎn)偵測(cè)到并且自動(dòng)在備用物理機(jī)或其他有空閑資源的物理機(jī)啟動(dòng)故障節(jié)點(diǎn)在線的虛擬機(jī)。利用VMware DRS動(dòng)態(tài)資源調(diào)配可以收集各物理主機(jī)和虛擬機(jī)資源（CPU、內(nèi)存等）使用情況，并且提供虛擬機(jī)最佳放置策略，可以自動(dòng)或手動(dòng)進(jìn)行虛擬機(jī)的在線遷移功能滿足最佳負(fù)載平衡需求。同時(shí)，可以構(gòu)建DRS HA集群在確保負(fù)載平衡的同時(shí)滿足高可用的要求。遷移后所有與客戶端的會(huì)話連接不會(huì)中斷，目前千兆網(wǎng)絡(luò)vSphere可以同時(shí)并發(fā)遷移4個(gè)虛擬主機(jī)。 管理與監(jiān)控規(guī)劃為了支持東莞銀行客戶實(shí)現(xiàn)業(yè)務(wù)目標(biāo)，VMware vSphere虛擬基礎(chǔ)架構(gòu)每天都必須持續(xù)高效運(yùn)行。本小節(jié)將根據(jù)東莞銀行客戶的生產(chǎn)環(huán)境，對(duì)管理與監(jiān)控組建進(jìn)行整體規(guī)劃，包括vCenter Server及其數(shù)據(jù)庫，警報(bào)和ESXi主機(jī)安裝與配置等。 指導(dǎo)原則與最佳實(shí)踐在進(jìn)行管理與監(jiān)控規(guī)劃時(shí)，我們會(huì)遵循如下的指導(dǎo)原則與最佳實(shí)踐。根據(jù)虛擬基礎(chǔ)架構(gòu)的大小部署一個(gè)或多個(gè)vCenter Server系統(tǒng)。u 如果可以允許停機(jī)一兩分鐘，請(qǐng)使用vSphere HA保護(hù)vCenter Server系統(tǒng)。u 如果為vSphere HA集群?jiǎn)⒂昧薉RS，請(qǐng)禁用vCenter Server虛擬機(jī)遷移。u 如果組織擔(dān)心在使用管理界面連接vCenter Server系統(tǒng)或ESXi主機(jī)時(shí)會(huì)有中間人攻擊，請(qǐng)使用證書。u 使用自動(dòng)化方法安裝和配置ESXi主機(jī)。u 限制具有vCenter Server訪問權(quán)限的用戶數(shù)量。u 將vCenter Server系統(tǒng)和托管管理接口的所有服務(wù)器（VMwarevSphere Client、vSphere PowerCLI等）添加到目錄服務(wù)。最好在虛擬機(jī)上安裝可選模塊。vCenter鏈接模式要求所有vCenter Server系統(tǒng)都是同一個(gè)域中的Active Directory成員，或至少是受信任域的成員。u 快照不是備份解決方案，但卻是很有用的撤消操作解決方案。但避免采用過于嚴(yán)格的vCenter Server警報(bào)設(shè)置。u 如果已存在管理集群，請(qǐng)優(yōu)先使用現(xiàn)有管理工具與流程執(zhí)行操作系統(tǒng)和應(yīng)用的更新操作。216。vCenter Server 系統(tǒng)性能建議多達(dá) 50 臺(tái)主機(jī)/500 個(gè)開啟的虛擬機(jī)2 個(gè) CPU4 GB RAM5 GB 磁盤空間多達(dá) 300 臺(tái)主機(jī)/3000 個(gè)開啟的虛擬機(jī)4 個(gè) CPU8 GB RAM10 GB 磁盤空間多達(dá) 1000 臺(tái)主機(jī)/10000 個(gè)開啟的虛擬機(jī)8 個(gè) CPU16 GB RAM10 GB 磁盤空間表：vCenter Server （Windows）系統(tǒng)性能建議vCenter Server Appliance 內(nèi)存建議多達(dá) 10 臺(tái)主機(jī)/100 個(gè)開啟的虛擬機(jī)4 GB RAM多達(dá) 100 臺(tái)主機(jī)/1000 個(gè)開啟的虛擬機(jī)8 GB RAM多達(dá) 400 臺(tái)主機(jī)/4000 個(gè)開啟的虛擬機(jī)13 GB RAM超過 400 臺(tái)主機(jī)/4000 個(gè)開啟的虛擬機(jī)17 GB RAM表：vCenter Server Appliance （Linux）內(nèi)存建議本次規(guī)劃將采用基于Windows的vCenter Server，根據(jù)東莞銀行客戶的生產(chǎn)環(huán)境情況，即：6臺(tái)物理主機(jī)，最大200個(gè)開啟的虛擬機(jī)，我們對(duì)vCenter Server使用如下的邏輯設(shè)計(jì)。項(xiàng)目說明廠商與模型VMware virtual machine virtual hardware 8CPU類型VMware vCPU網(wǎng)卡廠商與模型每個(gè)網(wǎng)卡的端口數(shù) x 速度網(wǎng)絡(luò)VMXNET31x Gigabit EthernetManagement network本地磁盤RAID級(jí)別N/A表：vCenter Server物理設(shè)計(jì)為了更好的管理與監(jiān)控對(duì)數(shù)據(jù)中心的運(yùn)行情況，我們向客戶推薦VMware vSphere with Operations Management套件，該套件除了可以高效的完成服務(wù)器虛擬化，讓整個(gè)數(shù)據(jù)中心更加的靈活，敏捷，高效外，它還可以深度監(jiān)控整個(gè)IT基礎(chǔ)架構(gòu)的容量與性能，可以實(shí)現(xiàn)更高的容量利用率、整合率和硬件節(jié)約，同時(shí)還可縮短問題診斷和解決的時(shí)間，避免業(yè)務(wù)受到影響。vSphere，許多群體稱之為“ESXi”，即底層虛擬化管理程序體系結(jié)構(gòu)的名稱，這是一種采用尖端技術(shù)的裸機(jī)虛擬化管理程序。圖：vSphere 數(shù)據(jù)中心的物理拓?fù)鋠Sphere 數(shù)據(jù)中心拓?fù)浒ㄏ铝薪M件:216。ESXi 軟件為虛擬機(jī)提供資源，并運(yùn)行虛擬機(jī)?？梢詫⒃S多配置相似的 x86 服務(wù)器組合在一起，并與相同的網(wǎng)絡(luò)和存儲(chǔ)子系統(tǒng)連接，以便提供虛擬環(huán)境中的資源集合（稱為群集）。 存儲(chǔ)網(wǎng)絡(luò)和陣列光纖通道SAN 陣列、iSCSI SAN 陣列和 NAS 陣列是廣泛應(yīng)用的存儲(chǔ)技術(shù)，VMware vSphere 支持這些技術(shù)以滿足不同數(shù)據(jù)中心的存儲(chǔ)需求。此安排可實(shí)現(xiàn)存儲(chǔ)資源的聚合，并在將這些資源置備給虛擬機(jī)時(shí)使資源存儲(chǔ)更具靈活性。 IP 網(wǎng)絡(luò)每臺(tái)計(jì)算服務(wù)器都可以有多個(gè)物理網(wǎng)絡(luò)適配器，為整個(gè) VMware vSphere 數(shù)據(jù)中心提供高帶寬和可靠的網(wǎng)絡(luò)連接。 vCenter ServervCenter Server 為數(shù)據(jù)中心提供一個(gè)單一控制點(diǎn)。它將各臺(tái)計(jì)算服務(wù)器中的資源統(tǒng)一在一起，使這些資源在整個(gè)數(shù)據(jù)中心中的虛擬機(jī)之間共享。即使在 vCenter Server 無法訪問（例如，網(wǎng)絡(luò)斷開）的情況下（這種情況極少出現(xiàn)），計(jì)算服務(wù)器仍能繼續(xù)工作。在vCenter Server 的連接恢復(fù)后，它就能重新管理整個(gè)數(shù)據(jù)中心。 管理客戶端 VMware vSphere 為數(shù)據(jù)中心管理和虛擬機(jī)訪問提供多種界面。 VMware基礎(chǔ)架構(gòu)層 ESXi架構(gòu)和組件 ESXi是組成vSphere基礎(chǔ)架構(gòu)核心的虛擬化管理器，可直接安裝在物理服務(wù)器之上，并允許多個(gè)虛擬機(jī)運(yùn)行于虛擬化層之上。與其他虛擬化管理程序不同，ESXi的所有管理功能都可以通過遠(yuǎn)程管理工具提供。ESXi 體系結(jié)構(gòu)獨(dú)立于任何通用操作系統(tǒng)運(yùn)行，可提高安全性、增強(qiáng)可靠性并簡(jiǎn)化管理。如下圖所示，從體系結(jié)構(gòu)來說ESXi包含虛擬化層和虛擬機(jī)，而虛擬化層有兩個(gè)重要組成部分：虛擬化管理程序VMkernel和虛擬機(jī)監(jiān)視器VMM。圖：ESXi體系結(jié)構(gòu) ESXi 網(wǎng)絡(luò)功能組件vSphere向主機(jī)和虛擬機(jī)提供了四種類型的網(wǎng)絡(luò)虛擬化服務(wù)：該平臺(tái)可將單臺(tái)主機(jī)內(nèi)的虛擬機(jī)相互關(guān)聯(lián)起來；將虛擬機(jī)連接到物理網(wǎng)絡(luò)；還可將 VMkernel 服務(wù)（例如 NFS、iSCSI 和 vSphere vMotion）加入物理網(wǎng)絡(luò)；最后，它還向負(fù)責(zé)為 vSphere 主機(jī)運(yùn)行管理服務(wù)的管理接口提供網(wǎng)絡(luò)連接。216。 客戶操作系統(tǒng)將虛擬適配器視為通用網(wǎng)卡，因而將采用標(biāo)準(zhǔn)驅(qū)動(dòng)程序。216。 虛擬交換機(jī)模擬傳統(tǒng)物理以太網(wǎng)絡(luò)交換機(jī)，在數(shù)據(jù)鏈路層轉(zhuǎn)發(fā)數(shù)據(jù)幀。vSphere 平臺(tái)支持 vSphere 標(biāo)準(zhǔn)交換機(jī)和 vSphere Distributed Switch；前者是主機(jī)級(jí)別的虛擬交換機(jī)配置，后者是跨多個(gè)關(guān)聯(lián)主機(jī)的單一虛擬交換機(jī)。此外，它還具有一系列在物理環(huán)境中由于諸多限制而根本無法實(shí)現(xiàn)的新功能。 ESXi 存儲(chǔ)組件VMware vSphere 存儲(chǔ)虛擬化是 vSphere 功能與各種