ESXI PVE DSM VRouter iKuai 综合经验分享贴

Zeaxion · 发表于 2022-10-10 20:42:07

来吧兄弟，一起玩一起讨论！

您需要登录才可以下载或查看，没有账号？注册

×

本帖最后由 Zeaxion 于 2022-10-10 20:42 编辑

一、ESXI优势：

1、CPU精准管控，几乎不会遇见虚拟机僵死，如果有，那肯定是你宿主硬盘读写有问题
2、网络配置简单，且vmxnet3性能较好，软交换对宿主机性能占用很低，实测千兆不到5%，万兆20%左右（9900ES下）
3、虚拟机备份非常简单，vmdk文件轻松下载备份（需虚拟机关机后）
4、虚拟机系统兼容性较强，单新系统支持需自行补丁（且有可能无效），部分虚拟机系统只能采用近亲标识，导致一直提示gust标识更新
劣势：
1、核显直通较复杂，容易出现直通后无外置输出仅可虚拟机内使用，核显驱动容易导致虚拟机死机打不上驱动
2、网络无法聚合，仅可使用单设备最大速度，网络支持硬件设备diy效率低（最好选用官方支持设备列表内）
3、虚拟机硬盘备份文件不可压缩，备份时下载文件体积较大

二、PVE
优势：
1、安装简单，支持硬件设备范围广综合性较强，有linux技巧的话操作更顺手
2、虚拟机磁盘文件默认采用压缩方式，更好降低宿主机磁盘占用
3、硬件直通可玩性较好，有直通、sriov、vgpu等多种，需自行查找相关资料
4、网络链路可聚合以提升网络可用吞吐（需手动shell命令自行，需要自行查阅资料）
5、外置设备对虚拟机调用更灵活，方便特种需求群体更方便的使用
6、对物理设备的温度、转速、处理器频率、存储空间使用、网络使用等信息监控和查阅更直观
7、PVE中核显可采用gvt导入，比ESXI好太多，gvt可分化核显给多个虚拟机公用，请自行查阅相关资料（但，不建议多折腾）
劣势：
1、虚拟机有概率僵死后只能强制重启宿主机
2、对虚拟机的开关机重启指令自行效率较低（列队模式，且多线程列队容易僵死）
3、备份虚拟机硬盘文件步骤较繁琐，需要配合shell命令和工具
4、部分硬件核显直通有概率导致插拔外置输出时造成宿主机死机重启或虚拟机僵死
5、万兆虚拟交换对DSM不友好，性能不佳

三、DSM
1、ESXI中可用默认引导中的vm选项无脑安装和使用，有核显转码需求的安装调试没有PVE中的shell转console，折腾调试难度较大
2、ESXI中万兆虚拟交换效率比PVE高，9900es下实测下行能有5G，上行只有2G，PVE中下行只有2G，上行只有1G（直通肯定好的多）
3、关于核显转码，用过，但是不推荐，毕竟现在手机端对h265的支持已经非常好了，没必要让DSM承载更多的转码运算
4、如果有转码需求，不如在win虚拟机或linux虚拟机中调用DSM源文件进行处理
5、切记，不要对DSM短时间内反复开关机，不要轻易对DSM执行ESXI PVE宿主互换，看似简单，出现bug解决时很头疼，所以决定迁移之前先备份，并做好最小系统迁移前测（比如对应数量的新硬盘，先执行一次完整安装过程，某些时候由于盘序不对和识别盘数量不对会造成巨大麻烦）

四、Vrouter
支持系统很多，基本都是无脑和傻瓜的，且教程很多，不多赘述

五、iKuai
爱云里面的某些占用带宽生财的东西，奉劝各位能不开就不开，好开不好关，甚至只能重装

六、ALL In One
1、底层系统稳定性首选是ESXI，但这货容易搞系统盘，所以承载系统的物理硬盘不要抠抠搜搜，尽量用较好的
2、布局首先网络层，其次应用层（DSM win linux）顺序按照自我需求调节，在对虚拟化不熟练的情况下多线操作bug之下只会更多bug
3、硬件设计标准，千兆只需要双核就够用，跑加密双核虽然跑不满，但是大都能满足需求，万兆最差四核，推荐多核心低功耗
4、磁盘是有空载使用寿命打的，盘越多利用率越低时间越长其性价比相对来说并不好，所以初期磁盘数量要仔细斟酌（毕竟盘数改从多到低难）
5、网络硬件根据自我需求购买，无论是否山寨或全新，根据自己使用经验和相关评测综合得出自己最需要的，不要无脑跟风
6、家用环境来说，千兆利用率都不到30%的，那么万兆普通人其实利用率更低
7、网络线材距离越长越不能吝啬成本，距离越短可以用便宜货，铜缆造价比光缆贵很多，铜缆体积较大走线更费事
8、入户后多线复用拨号+IPTV有大量参考资料，但是多线服用单线最大物理传输速度是恒定的，请悉知（单入户多网络+多IPTV原理一样）
9、家用环境下mesh组网和wifi路由改纯AP效果差异非常小且更费钱，链路稳定性也不如纯傻瓜AP（mesh适合原综合布线不佳，且后期改动成本较大）

本人实用：
CPU：9900es
主板：Z370M-ITX-AC/WIFI
内存：D4-16G-2400*2
硬盘：8T*4 + 2T-SSD*2 + 512G-Nvme*3
网卡：I210 + I219 + 82599es-10G*2/*4 or HPE-530-10G*2
宿主系统：PVE7
虚拟机系统：iKuai + OP + Centos7 + Win10 + DSM6
网络套餐为：电信59/月，100M下20M上，单路三线叠加

实测情况：
DSM在ESXI中虚拟万兆最大5G下2G上，直通万兆9G下5G上；PVE中虚拟万兆最大2G下1G上，直通万兆9G下，5G上
Centos7/Win10在ESXI和PVE中虚拟万兆均为上下5G，直通均为9G下5G上
目前已性能过剩，8核心只开6核使用
这套配置于2019年使用至今，三年无故障（意外断电和检修断电不超过30次）

附一张网络跑千兆的负载图
屏幕截图(20).png