重裝vCenter 并重建交換機(jī)

■河北 王春海 薄鵬

本次實(shí)驗(yàn)用到兩臺交換機(jī)，2 臺交換機(jī)使用2 條光纖以鏈路聚合方式連接到一起。每臺主機(jī)有一塊集成的網(wǎng)卡，每臺主機(jī)安裝了一塊2 端口網(wǎng)卡。其中集成的網(wǎng)卡連接 到S5700-24TPSI 交換機(jī)的Access端口用于ESXi 主機(jī)管理，配置標(biāo)準(zhǔn)交換 機(jī)vSwitch0，設(shè)置管理地址依次是172.18.96.41～172.18.96.45。另 外安裝的2 端口網(wǎng)卡連接到S5720S-20P-SI 的Trunk 端口，用于vSAN 流量與虛擬機(jī)的流量。其中為vSAN流量的VMkernel配置的IP 地址分別是172.18.93.141～172.18.93.145。這5 臺主機(jī)連接拓?fù)淙鐖D1 所示。

圖1 實(shí)驗(yàn)主機(jī)連接拓?fù)浣Y(jié)構(gòu)

表1 華為S5720S-28P-SI 交換機(jī)端口劃分

5 臺實(shí)驗(yàn)主機(jī)的2 端口網(wǎng)卡連接到 S5720S-28 P-S I 交換機(jī)的端口1～端口10，5 臺實(shí)驗(yàn)主機(jī)集成的網(wǎng)卡連接到S5700-24TP-SI 的端口1～端口5。華為S5720S-28PSI 交換機(jī)端口劃分如表1 所示，華為S5700-24TPSI 交換機(jī)端口劃分如表2 所示。

本次實(shí)驗(yàn)中5 臺ESXi 主機(jī)、vCenter Server的IP 地址規(guī)劃如表3 所示。

在本實(shí)驗(yàn)中，圖1 中每臺主機(jī)有兩條網(wǎng)線連接到交換機(jī)的TRUNK 端口，配置分布式交換機(jī)，在分布式交換機(jī)上創(chuàng) 建vlan2001、vlan2002、vlan2003 的 分布式端口組，其中vlan2001、vlan2002 用來承載虛擬機(jī)的流量，vlan2003 用來承載vSAN 流量。

當(dāng)前的實(shí)驗(yàn)是 模 擬vCenter Server 出 現(xiàn) 故障，并且vCenter Server 沒有備份的情況下，通過重新安裝vCenter Server，重新添加ESXi 主機(jī)、重建分布式交換機(jī)的內(nèi)容。

表2 華為S5700-24TP-SI 交換機(jī)端口劃分

表3 標(biāo)準(zhǔn)vSAN群集主機(jī)與vCenter Server AppIiance的IP地址規(guī)劃

重新安裝vCenter Server AppIiance

在 vCenter Server Appliance 沒有備份的情況下，如果vCenter Server 出了問題，只能通過重新安裝vCenter Server Appliance，然后將ESXi 主機(jī)添加到群集中。

【說明】當(dāng)vCenter Server停止時，不能修改虛擬機(jī)使用分布式虛擬交換機(jī)的端口組，但可以修改虛擬機(jī)的配置，從使用分布式虛擬交換機(jī)的端口組改為標(biāo)準(zhǔn)端口組。如果修改端口組為分布式端口組會彈出“不支持添加或重新配置連接到非臨時分布式虛擬端口組的網(wǎng)絡(luò)適配器”。

在vSAN 主機(jī)都正常工作，除了vCenter Server 虛擬機(jī)出問題導(dǎo)致不能使用外，其他的虛擬機(jī)都正常工作。在無備份、修復(fù)無效的情況下，只能重新安裝vCenter Server Appliance。如 果確認(rèn)需要重新安裝vCenter Server Appliance，可以找同版本的vCenter Server Appliance，也可以找較新版本的vCenter Server，但不建議跨度太大（主版本號相同，次版本號可以高一些）。

在重新安裝前，原來出故障的vCenter Server虛擬機(jī)可以關(guān)機(jī)或重命名。重新安裝前要了解當(dāng)前環(huán)境中有幾臺ESXi 主機(jī)，每臺主機(jī)的IP 地址、管理員帳戶和密碼，每臺主機(jī)的配置、磁盤組、虛擬交換機(jī)、虛擬端口組等情況。在了解這些信息之后，在網(wǎng)絡(luò)中的一臺計算機(jī)中，加載vCenter Server Appliance 安裝鏡像，開始vCenter Server 的安裝。在安裝的時候可以使用原來的IP 地址和域名，也可以使用新的IP 地址和域名。

vCenter Server 的安裝配置本文不做過多介紹，本節(jié)只介紹關(guān)鍵步驟：

1.運(yùn)行vCenter Server Appliance 安裝程序，在“設(shè)備部署目標(biāo)”對話框的“ESXi主機(jī)名或vCenter Server 名稱”文本框中，輸入要放置vCenter Server Appliance 虛 擬機(jī)的ESXi 主機(jī)的IP 地址，本示例為172.18.96.45，然后在用戶名和密碼中輸入172.18.96.45 的root 帳戶和密碼。

2.在“設(shè)置設(shè)備虛擬機(jī)”對話框的“虛擬機(jī)名稱”文本框中輸入新部署的虛擬機(jī)名稱，本示例為vc.heinfo.edu.cn-96.10-New3。

3.在“配置網(wǎng)絡(luò)設(shè)置”對話框中，為新部署的vCenter Server 設(shè)置FQDN 和IP 地址等參數(shù)，本示例仍然使用vc.heinfo.edu.cn 的域名和172.18.96.10 的IP 地址。

4.在“即將完成第1 階段”對話框中顯示了部署虛擬機(jī)的信息，如圖2 所示。

圖2 即將完成第一階段

5.然后根據(jù)向?qū)瓿傻诙A段的部署所示。

將ESXi 主機(jī)添加到新的vCenter Server

在重新安裝了vCenter Server 之后，需要在vCenter Server 中新建數(shù)據(jù)中心、新建群集，并將ESXi 主機(jī)添加到群集中，主要步驟如下：

1.使用vSphere Client登錄到vCenter Server，在添加并分配許可證之后，新建數(shù)據(jù)中心，本示例使用默認(rèn)名Datacenter。

2.在創(chuàng)建數(shù)據(jù)中心之后，用鼠標(biāo)右鍵單擊新建的數(shù)據(jù)中心名稱，在彈出的快捷菜單中選擇“新建群集”，在彈出的“新建群集”對話框中的“名稱”文本框中設(shè)置新建群集名稱，本示例為vSAN-HA，然后選擇開啟DRS、vSphere HA、vSAN。

3.創(chuàng)建群集之后，在“群集快速入門”中顯示了后續(xù)任務(wù)，在“添加主機(jī)”選項中單擊“添加”按鈕，在“將新主機(jī)和現(xiàn)有主機(jī)添加到您的群集”對話框中，將172.18.96.41～1 72.18.96.45 共5臺主機(jī)添加到群集。

4.添加之后只有部分主機(jī)在群集中，要將其余主機(jī)移入群集，需要先并主機(jī)置于維護(hù)模式，然后移入群集。之后將主機(jī)退出維護(hù)模式。

5.在導(dǎo)航器中選中主機(jī)，在“配置→網(wǎng)絡(luò)→虛擬交換機(jī)”中看到分布式交換機(jī)不再位于vCenter Server中。

6.此時vSAN 數(shù)據(jù)存儲正常，在“配置→vSAN →磁盤管理”中可以看到所有主機(jī)都在組1 中，vSAN 磁盤掛載正常。但分布式交換機(jī)不正常，需要重新配置分布式交換機(jī)。

重新配置分布式虛擬交換機(jī)

1.如果ESXi 主機(jī)配置的是標(biāo)準(zhǔn)交換機(jī)，在重新安裝了vCenter Server 之后，將ESXi 主機(jī)添加到vCenter Server 并配置了HA 即可完成設(shè)置，但如果ESXi 主機(jī)使用的是分布式交換機(jī)，還需要重新配置分布式交換機(jī)。如果重新配置分布式交換機(jī)，需要通過以下步驟完成（以原來的分布式交換機(jī)至少有2 個上行鏈路為例）。

（1）新建分布式交換機(jī)DSwitch-B。假設(shè)原來的分布式交換機(jī)的名稱為DSwitch-A，新建分布式交換機(jī)DSwitch-B，為其指定2 個上行鏈路。

（2）修改MTU。新建分布式交換機(jī)DSwitch-B 后，修改MTU 數(shù)據(jù)與原來DSwitch-A的數(shù)值相同。

（3）為DSwitch-B 添加一條上行鏈路。修改DSwitch-B，添加管理主機(jī)，為DSwitch-B 分配一條上行鏈路，使用原來DSwitch-A的一條上行鏈路（即從原來DSwitch-A 中移除一條上行鏈路，將其分配給DSwitch-B）。這一步配置完成后，原來的DSwitch-A、新配置的DSwitch-B 各使用一條上行鏈路，保證遷移端口組前、后通訊不中斷。

（4）對照DSwitch-A 創(chuàng)建端口組。在DSwitch-B 創(chuàng)建與DSwitch-A 對應(yīng)的端口組，這需要有類似的名稱以及相同的vlan 屬性等。

（5）遷移原DSwitch-A 的端口組、涉及到的VMkernel，如果vSAN 流量在DSwitch-A上，遷移該VMkernel 流量的端口組到DSwitch-B。在遷移的過程中，原DSwitch-A的端口組、綁定在DSwitch-A端口組的VMkernel 遷移到DSwitch-B，在遷移過程中，這些端口組的上行鏈路從DSwitch-A 剩余的一條鏈路切換到DSwitch-B 的一條鏈路，因?yàn)檫@兩個鏈路連接到物理交換機(jī)相同的端口及屬性，所以遷移過程中網(wǎng)絡(luò)不會中斷。

在這一步中，如果虛擬機(jī)使用DSwitch-A 的端口組，也在這一階段將這些虛擬機(jī)的端口組從DSwitch-A 遷移到DSwitch-B 對應(yīng)的端口組。

（6）修改DSwitch-B 的上行鏈路2為原來DSwitch-A 剩余的一條上行鏈路，這一步的操作是將原來DSwitch-A 的上行鏈路移除，遷移到DSwitch-B。

（7）到這一階段，DSwitch-A 沒有上行鏈路，其端口組也沒有分配給虛擬機(jī)，DSwitch-A 會自動清除。如果沒有從ESXi 主機(jī)清除，一般是某臺虛擬機(jī)或某個模板虛擬機(jī)分配了DSwitch-A 的端口組，如果是模板虛擬機(jī)，將模板轉(zhuǎn)換成虛擬機(jī)，修改虛擬機(jī)網(wǎng)絡(luò)使用DSwitch-B 的端口組后，可以手動將DSwitch-A 移除。

2.在本節(jié)中需要創(chuàng)建分布式交換機(jī)、為分布式交換機(jī)分配上行鏈路、創(chuàng)建分布式端口組等內(nèi)容，這些內(nèi)容在前文已經(jīng)做過介紹。本節(jié)的操作涉及到這些知識的靈活使用。下面介紹關(guān)鍵步驟：

（1）使用vSphere Client 登錄到vCenter Server，單擊“”圖標(biāo)，用鼠標(biāo)右鍵單擊“Datacenter”，在彈出的快捷菜單中選擇“Distributed Switch →新建Distributed Switch”，在“新建Distributed Switch”對話框的“名稱和位置→名稱”處輸入新建交換機(jī)的名稱，在此使用默認(rèn)值DSwitch。

（2）在“編輯設(shè)置”對話框的“上行鏈路數(shù)”中選擇2，選中“創(chuàng)建默認(rèn)端口組”的選擇，設(shè)置端口組名稱為vlan2003。

（3）在“即將完成”對話框中顯示了新建分布式虛擬交換機(jī)的信息，檢查無誤之后單擊“Finish”按鈕。

（4）創(chuàng)建分布式交換機(jī)及端口組完成后，用鼠標(biāo)右鍵單擊vlan2003,在彈出的快捷菜單中選擇“編輯設(shè)置”，在彈出的“vlan2003-編輯設(shè)置”對話框的“VLAN”選項，修改VLAN 類型為VLAN，VLAN ID 為2003。

（5）檢查虛擬交換機(jī)的MTU 值，如果啟用了巨型幀，需要將DSwitch 分布式虛擬交換機(jī)的MTU 修改為9000，這與原來分布式虛擬交換機(jī)的MTU 值相同。

（6）然后添加VLAN2001、VLAN2002 的分布式端口組，這些不再介紹。

3.下面為新創(chuàng)建的分布式虛擬交換機(jī)添加上行鏈路，主要步驟如下：

（1）在vSphere Client的“網(wǎng)絡(luò)”界面中，用鼠標(biāo)右鍵單擊新建的虛擬交換機(jī)DSwitch，在彈出的快捷菜單中選擇“添加和管理主機(jī)”，在“添加和管理主機(jī)→選擇任務(wù)”對話框中選擇“添加主機(jī)”，添加當(dāng)前節(jié)點(diǎn)所有主機(jī)。

圖3 分配一條上行鏈路

圖4 分配端口組

（2）在“管理物理適配器”對話框中為此分布式虛擬交換機(jī)添加物理網(wǎng)卡。雖然在重新安裝vCenter Server之后，原來的分布式交換機(jī)不能重新配置，但原來分布式交換機(jī)的上行鏈路仍在使用。所以在此操作中，不要將所有的上行鏈路一次分配完，先從原來的2 塊物理網(wǎng)卡中選擇其中一塊，這樣新配置的分布式交換機(jī)和原來的分布式交換機(jī)各使用一塊上行鏈路，這樣保證網(wǎng)絡(luò)不會中斷。在本示例中，將每臺主機(jī)的vmnic2 配置為上行鏈路1，如圖3 所示。

（3）在添加了上行鏈路后，其他選擇默認(rèn)值，直到本次操作完成。

4.在添加了上行鏈路后，遷移vSAN流量的VMkernel，主要步驟如下：

（1）用鼠標(biāo)右鍵單擊分布式交換機(jī)DSwitch，在彈出的快捷菜單中選擇“添加和管理主機(jī)”，在“選擇任務(wù)”對話框中選擇“管理主機(jī)網(wǎng)絡(luò)”，在“選擇主機(jī)”中添加172.18.96.41～172.18.96.45 的主機(jī)。

圖5 虛擬交換機(jī)

（2）在“管理VMkernel適配器”對話框中，選中vmk1 單擊“分配端口組”，如圖4 所示。在此示例中，由于vCenter Server重新安裝導(dǎo)致原來的分布式交換機(jī)無法配置，所以在此圖中vmk1 有黃色的感嘆號，其“源端口組”中無端口組信息。

（3）在“選擇網(wǎng)絡(luò)”對話框中選擇vlan2003，并選擇“將此端口組分配應(yīng)用于其余主機(jī)”。

（4）為每臺ESXi 主機(jī)的vmk1（用 于vSAN 流 量的VMkernel）分配新配置的DSwitch的vlan2003端口組。

（5）在“即將完成”對話框單擊“Finish”按鈕完成VMkernel 的遷移。

然后將每臺主機(jī)的另一個物理網(wǎng)卡端口為與到分布式交換機(jī)的“上行鏈路2”。其他選項使用默認(rèn)值不變。

【說明】通過兩步分配完2個上行鏈路是為了保證在重新配置虛擬交換機(jī)的過程中網(wǎng)絡(luò)不中斷。

此時每臺物理主機(jī)的原來遺留的分布式虛擬交換機(jī)應(yīng)該已經(jīng)自動移除，如果還有遺留的分布式虛擬交換機(jī)，一般是在vCenter Server 故障期間（在原來的vCenter Server 損壞之后，在重新安裝新的vCenter Server 之前）修改了虛擬機(jī)的端口組導(dǎo)致。

對于這種情況，將涉及到的虛擬機(jī)修改為新的分布式交換機(jī)的端口組，然后刪除遺留的分布式交換機(jī)即可。

（1）在vSphere Client的導(dǎo)航器中選擇每臺主機(jī)，在“配置→網(wǎng)絡(luò)→虛擬交換機(jī)”中檢查是否有多余的分布式交換機(jī)，如果存在，選中故障的虛擬交換機(jī)，單擊“…”在彈出的快捷菜單中選擇“移除”。

（2）在“從Distributed Switch 中移除主機(jī)”對話框中選擇“是”按鈕。移除之后，每臺主機(jī)配置如圖5 所示。

更新ESXi 主機(jī)配置

因?yàn)橹匦屡渲昧朔植际浇粨Q機(jī)的上行鏈路（分兩次完成），此時在vSAN 監(jiān)控中會有“網(wǎng)絡(luò)連接丟失”的報警，另外由于ESXi 主機(jī)添加到新的vCenter，也需要在vCenter Server中更新ESXi 的信息。

（1）使用 vSphere Client 登錄到vCenter Server，在導(dǎo)航器中選擇vSAN 群集（本示例中群集名稱為vSAN-HA），在“監(jiān)控→vSAN →運(yùn)行狀況”的vCenter 狀態(tài)具有權(quán)威性中顯示了未同步的主機(jī)，單擊“更新ESXi 配置”鏈接。

（2）在“確認(rèn)-更新ESXi 配置”對話框中，單擊“確定”按鈕，更新后顯示“vSAN 群集配置一致性”。

在導(dǎo)航器中選擇群集，在“監(jiān)控→問題與警報→已觸發(fā)的警報”中選中所有警告，單擊“重置為綠色”，重置之后，每臺主機(jī)前面的紅色報警取消，狀態(tài)正常。

最后還要重新創(chuàng)建資源池，將虛擬機(jī)根據(jù)原來的規(guī)劃移入對應(yīng)的資源池。