VMware vSphere vSAN超融合虚拟化集群

前言
FusionCube是华为出品的,一套使用华为FusionSphere虚拟化技术打包出售的超融合一体机,我这里使用的三台超融合,包含华为 2288H V5服务器和FusionSphere虚拟化授权。
随着时间推进,华为超融合的软件授权已经过期,由于华为超融合生态与现有的虚拟化生态不兼容,随即决定将华为超融合改造为VMware vSphere vSAN超融合集群。
原华为数据会全部丢失。

整体思路
为服务器安装ESXi系统,服务器两个网络接口为一组,ESXi控制网络采用千兆网口,vSAN和业务网络采用trunk网络,配置独立VLAN隔离。

注意:本次改造为全过程记录,请全部看完后再进行操作;

运维最重要的是思路和耐心!

外观
正面照

图片[1]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

背面照

图片[2]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

由于原标签已经老旧脱落,因此进行标签的重新标记

图片[3]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

2块NVME 800G 固态

图片[4]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

2块SAS 600G 机械 RAID1 做系统盘

图片[5]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

14块SAS 2.4T 机械

图片[6]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

进入BIOS/UEFI
重启

图片[7]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

F11进入 启动管理器

图片[8]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

进入启动管理器时,会提示输入BIOS密码,默认为Admin@9000

图片[9]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

安装ESXi7
进入启动盘,我使用的是Ventoy

图片[10]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

进入ESXi7

图片[11]-VMware vSphere vSAN超融合虚拟化集群-云计算运维
图片[12]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

踩坑1
进入后发现看不到NVME固态硬盘

图片[13]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

我的想法是,安装完ESXi7后再安装驱动

图片[14]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

系统安装完成

图片[15]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

查看网卡对应关系
从左往后,2光口2网口2光口,对应ESXi系统中网卡从上到下顺序LOM1-4 SLOT4

图片[16]-VMware vSphere vSAN超融合虚拟化集群-云计算运维
图片[17]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

配置IP地址

图片[18]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

配置DNS和主机名

图片[19]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

登录ESXi

图片[20]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

开启SSH服务

图片[21]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

使用SSH登录,上传从官网下载的ESXi6.7.ZIP中抽取的NVME VIB驱动
使ESXi进入CommunitySupported等级
esxcli software acceptance set --level=CommunitySupported
安装驱动
esxcli software vib install -v 完整路径.vib

图片[22]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

此时出现了大坑,安装nvme驱动会替换掉网卡驱动,导致开机无法联网。

踩坑2
莫慌,重来!

第二次安装测试,使用ESXi6.7启动,发现可以看到NVMe固态硬盘
这是因为ESXi7为了缩小体积,精简了大量的老旧设备驱动,我们可以通过修改镜像文件,将老的驱动放置在ESXi7中使用。

图片[23]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

因此,第二次安装测试,我们采用封装ISO的方式进行,从6.7的ISO中解压出NVME.V00文件,替换到ESXi7的NVME_PCI.V00文件,保持名字一致替换

图片[24]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

镜像另存为导出

图片[25]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

也不再前往现场,而是采用BMC远程挂载ISO文件的方式安装

图片[26]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

还是正常安装,测试可以看到NVME固态了

图片[27]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

安装完成后,再次进入ESXi,也可以看到硬盘

图片[28]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

这里我不在超融合中安装vCenter了,直接使用其他VC新建集群

图片[29]-VMware vSphere vSAN超融合虚拟化集群-云计算运维
图片[30]-VMware vSphere vSAN超融合虚拟化集群-云计算运维
图片[31]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

出于习惯,进行补丁更新

图片[32]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

此时出现了第二个大坑,更新补丁后,驱动覆盖了,NVME硬盘看不到了。

啊?!!!

踩坑3
再次重装,本次安装后进行备注,不再进行系统补丁更新

图片[33]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

按集群向导配置集群,配置分布式交换机

图片[34]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

下一步时出现黑块遮挡,啊?更换firefox浏览器后可以正常操作,分布式交换机配置完成

图片[35]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

配置完集群后发现 “缺少功能MWAIT”,重启进入BIOS进行开启

图片[36]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

进入BIOS

图片[37]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

位于 BIOS – Advanced – Socket Configuration – Processor Configuration – MONITOR/MWAIT

图片[38]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

然后发现集群没启用VSAN功能,需要新建一个集群,啊?

配置vSAN
新建一个vSAN集群,将主机拖入vSAN集群,按向导配置集群

图片[39]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

声明缓存层和容量层

图片[40]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

注意,集群的告警一个是我关闭了数据上传,另一个是替换了NVME驱动,所以告警了

图片[41]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

使用默认vSAN策略

图片[42]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

默认为RAID1镜像模式,即一个虚拟机存储两份分布在整个集群中,三台物理主机允许一台宕机

图片[43]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

分布式交换机
工作正常

图片[44]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

验证
部署1台服务器,容量占用为两倍

图片[45]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

在线迁移测试正常

图片[46]-VMware vSphere vSAN超融合虚拟化集群-云计算运维
图片[47]-VMware vSphere vSAN超融合虚拟化集群-云计算运维
图片[48]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

BUG处理
由于非原生支持vSphere,所以有些主板硬件告警会误报,需要屏蔽掉;同时对于服务器硬件的监控,需要自行配置SNMP或邮箱进行告警通知。

图片[49]-VMware vSphere vSAN超融合虚拟化集群-云计算运维
图片[50]-VMware vSphere vSAN超融合虚拟化集群-云计算运维
图片[51]-VMware vSphere vSAN超融合虚拟化集群-云计算运维

总结
历时2天,克服困难,遥遥领先!遥遥领先!遥遥领先!

下载系统获取许可:

[members_only]

VMware vSphere ESXi 7.0 Enterprise Plus

JJ2WR-25L9P-H71A8-6J20P-C0K3F

HN2X0-0DH5M-M78Q1-780HH-CN214

JH09A-2YL84-M7EC8-FL0K2-3N2J2

VMware vSphere 7 Enterprise Plus with Add-on for Kubernetes

J1608-4GJEQ-071L8-9VA0H-2MUK6

M10DH-8YL47-474L1-DV3U0-8H054

MM4MR-2G005-H7039-JVCAP-2RAL8

VMware vCenter 7.0 Standard

104HH-D4343-07879-MV08K-2D2H2

410NA-DW28H-H74K1-ZK882-948L4

406DK-FWHEH-075K8-XAC06-0JH08

VMware vSphere ESXi 7.0 Enterprise Plus

JJ2WR-25L9P-H71A8-6J20P-C0K3F

HN2X0-0DH5M-M78Q1-780HH-CN214

JH09A-2YL84-M7EC8-FL0K2-3N2J2

VMware vSphere ESXi 8.0

ESXi 8:4V492-44210-48830-931GK-2PRJ4

VCSA 8:0Z20K-07JEH-08030-908EP-1CUK4

ESXi 8:4F40H-4ML1K-M89U0-0C2N4-1AKL4

VCSA 8:0F41K-0MJ4H-M88U1-0C3N0-0A214

ESXi 8:HG00K-03H8K-48929-8K1NP-3LUJ4

VCSA 8:4F282-0MLD2-M8869-T89G0-CF240

vSAN 8:NF212-08H0K-488X8-WV9X6-1F024

vSAN 8:witness JF61H-48K8K-488X9-W98Z0-1FH24

Horizon Enterprise v8.x 0G4DA-49J81-M80R1-012N4-86KH4



系统下载

链接:https://pan.baidu.com/s/1UQOiFNXcqDxQ4dEdL39tDQ?pwd=vhn8 提取码:vhn8

[/members_only]

© 版权声明
THE END
喜欢就支持一下吧
点赞0 分享
评论 抢沙发

请登录后发表评论

    暂无评论内容