文档信息
1. 总体架构
本方案以一台 Dell R730xd 承载全部业务:ESXi 作为底层虚拟化平台,爱快负责出口与 DHCP,OpenWrt 承担旁路分流,飞牛负责存储,业务虚拟机承载数据库、缓存、运维平台、安全网关与开发环境。
flowchart TB
U["运营商 / 上级网络"] -->|物理网卡直通| IK["爱快 iKuai 主路由 VM(192.168.10.1)"]
IK -->|LAN vSwitch| LAN["LAN 虚拟交换机(192.168.10.0/24)"]
LAN --> OW["OpenWrt 旁路由 VM(192.168.10.2)"]
LAN --> NAS["飞牛 fnOS NAS VM(HBA 直通)"]
LAN --> DB1["MySQL 主 VM(192.168.10.21)"]
LAN --> DB2["MySQL 从 VM(192.168.10.22)"]
LAN --> RD["Redis VM(192.168.10.23)"]
LAN --> OP["1Panel 运维 VM(192.168.10.24)"]
LAN --> JS["JumpServer 堡垒机 VM(192.168.10.25)"]
LAN --> WAF["雷池 SafeLine WAF VM(192.168.10.26)"]
LAN --> DEV["JetBrains 开发 VM(192.168.10.27)"]
WAF -->|反代转发| OP
1.1 组件清单
2. 部署总览
部署顺序遵循「先底座、后网络、再业务、最后安全收口」的原则:网络与存储就绪后,所有业务虚拟机才能按统一网段接入。
3. 第 0 步:硬件与固件准备
3.1 硬件核对清单
确认 CPU:双路 Intel Xeon E5-2600 v3/v4 系列(建议 E5-2680 v4 及以上)
确认内存:建议 128 GB 及以上(24 条 DDR4 插槽按需插满)
确认阵列卡:PERC H730 / H730P(系统盘 RAID 用)
确认 HBA 卡:LSI 9211-8i 或 Dell HBA330,并刷为 IT 模式(NAS 数据盘直通用)
确认网卡:4×1GbE(Broadcom BCM5720)及可选 10GbE(Intel X520/X540)
确认 iDRAC8 Enterprise 授权可用(远程控制台必需)
准备两块 SSD(系统与虚拟机)、若干块 HDD(NAS 数据盘)
3.2 BIOS 设置
开机按 F2 进入 System Setup,按以下值设置:
3.3 固件升级
从 Dell 支持站下载并升级 iDRAC8 固件至最新
升级 BIOS 至最新版本
升级 PERC H730 / HBA330 固件至最新
升级网卡固件(BCM5720 / X520 等)
升级后进入 iDRAC 校验硬件健康状态(无严重告警)
提示
R730xd 部署 ESXi 8.0 的前提是驱动到位,固件陈旧是最大的失败源,务必先升级再安装系统。
3.4 磁盘规划
关键决策
NAS 数据盘不要用 H730 建 RAID 卷再转 vmdk。HBA(IT 模式)直通可完整保留 SMART 健康度、热插拔与磁盘直通能力,是飞牛方案的标准做法。
4. 第 1 步:网络与 IP 规划
4.1 物理网口分配
4.2 IP 规划
4.3 VLAN 进阶方案
起步可先使用单一业务网段;企业化运营建议按 VLAN 隔离:
4.4 操作清单
记录各物理网口对应的 MAC 地址(ESXi 安装时核对)
确定 WAN 接入方式(DHCP / PPPoE / 静态)
确定 DNS:建议 223.5.5.5 与 119.29.29.29
若启用 VLAN,先在交换机上创建对应 VLAN
5. 第 2 步:ESXi 8.0U3i 安装
5.1 版本与兼容性说明
Dell 13 代服务器(含 R730xd)官方兼容列表最高支持到 ESXi 7.0U3;ESXi 8.0 未列入官方认证,但社区在 8.0U3x 上已大规模实测稳定(megaraid_sas、tg3、ixgbe 等驱动均为 ESXi 内置)。两条路线:
求稳 / 需要官方支持:使用 ESXi 7.0U3l Dell 定制镜像。
使用新版:ESXi 8.0 Update 3i(2026-02 发布,build 25205845),采用标准 VMware ISO。本文按 8.0U3i 编写,7.0U3l 步骤一致。
5.2 安装步骤
从 Broadcom Support 下载 ESXi 8.0U3i ISO
iDRAC 虚拟控制台挂载 ISO,F11 从虚拟光驱启动(或 Ventoy U 盘)
安装目标选择 H730 RAID1 SSD 卷
设置 root 强密码并妥善保管
管理网络选择 P3 口并配置 192.168.10.10/24
设置 NTP 与 DNS
安装完成后通过 https://192.168.10.10 验证可访问
提示
ESXi 8.0 起官方不再推荐 SD/USB 启动设备,系统必须安装在 RAID1 SSD 上。
5.3 授权说明
Broadcom 已取消免费 ESXi 授权,安装后为 60 天评估模式。生产环境需购买 vSphere Standard 或 Essentials Plus 授权;如不接受商业授权,可评估 Proxmox VE 等替代虚拟化平台。
5.4 基础加固
关闭 ESXi Shell,SSH 仅限管理网段
修改 root 密码策略,启用锁定策略
配置 NTP 服务器
定期导出 ESXi 配置备份
6. 第 3 步:网卡直通与虚拟交换机
6.1 直通配置
ESXi Web 界面 → 管理 → 硬件 → PCI 设备。
勾选爱快 WAN 使用的物理网卡与 HBA 卡,点击「切换直通」,重启主机。
确认状态为「活动 / 可用」。
6.2 虚拟交换机
创建 vSwitch-LAN:将剩余 LAN 物理口加入同一 vSwitch
设置端口组(如 VM-LAN),VLAN 按第 1 步规划配置
确认 ESXi 管理口所在 vSwitch 未被误删
6.3 操作清单
直通设备列表中无「ESXi 管理口网卡」
直通后主机能正常重启并保持管理网络可达
记录直通设备的 PCI 地址,供创建虚拟机时核对
7. 第 4 步:爱快主路由部署
7.1 虚拟机参数
7.2 安装与初始化
到爱快官网下载最新 ISO(当前 3.7.23,Build 20260602)。
上传 ISO 并挂载,虚拟机启动后安装到硬盘,重启。
控制台设置 LAN IP:192.168.10.1/24。
浏览器访问 http://192.168.10.1,默认 admin/admin,立即修改。
WAN 口选择 DHCP 或 PPPoE,确认可上网。
配置 DHCP:地址池 192.168.10.100-254,网关 192.168.10.1,DNS 223.5.5.5、119.29.29.29。
7.3 操作清单
默认密码已修改为强密码
WAN 连通性测试通过(外网可访问)
DHCP 下发正常,终端可获取地址
按需关闭 UPnP,管理端口仅限内网
按需配置流控 / 行为管理策略
常见坑
直通网卡顺序错乱。务必使用「物理网卡直通」而非共享虚拟网卡,并在爱快界面核对 WAN/LAN 对应的物理口。
8. 第 5 步:OpenWrt 旁路由部署
8.1 镜像准备
下载 OpenWrt x86_64 官方镜像(combined-ext4 或 EFI 版),解压后转换格式:
qemu-img convert -f raw -O vmdk openwrt.img openwrt.vmdk
8.2 虚拟机参数
8.3 旁路由配置
首次进入控制台执行:
uci set network.lan.ipaddr='192.168.10.2'
uci set network.lan.netmask='255.255.255.0'
uci set network.lan.gateway='192.168.10.1'
uci set network.lan.dns='223.5.5.5'
uci commit network
uci set dhcp.lan.ignore='1'
uci commit dhcp
/etc/init.d/network restart
即:LAN 指向爱快、关闭自身 DHCP,构成标准旁路由形态。
8.4 分流模式
按需分流(推荐):在爱快「DHCP 静态分配 / 下一跳网关」中,为指定终端把网关指到 192.168.10.2;旁路由故障不影响其他终端上网。
全局透明:爱快 DHCP 下发网关改为 192.168.10.2,客户端默认走 OpenWrt,OpenWrt 再转发回爱快;需放行 LAN 区域转发并视情况开启 masquerade。
8.5 操作清单
旁路由能 ping 通 192.168.10.1 与外网
指定设备走旁路由后分流生效
旁路由关机(按需分流模式)不影响主路由上网
9. 第 6 步:飞牛 fnOS 存储中心
9.1 存储方案选择
9.2 虚拟机参数
9.3 安装与初始化
到飞牛官网下载 fnOS x86 ISO(当前最新稳定版)。
创建虚拟机并添加 HBA 直通设备,挂载 ISO 安装到系统盘。
9.4 存储与共享配置
创建存储池:按盘数选择 Btrfs RAID1 / RAID5(或 ZFS)
创建共享文件夹并设置 SMB / NFS / WebDAV
创建独立用户,关闭默认共享的匿名访问
磁盘 SMART 信息在飞牛界面可见
配置定时快照与本地备份任务
提示
飞牛默认管理端口 5666,禁止直接映射到公网,远程访问走 VPN(见第 15 步)。
10. 第 7 步:业务虚拟机资源规划
合计约 36 vCPU / 80 GB 内存,128 GB 内存的 R730xd 可从容承载。64 GB 低配调整建议:Redis 并入 1Panel 虚拟机、MySQL 从库降至 4 GB、开发机降至 8 GB。
部署提示
所有 Ubuntu 虚拟机安装时选择「安装 OpenSSH Server」,并统一使用密钥认证。
11. 第 8 步:MySQL 主从集群
11.1 安装
主库 db-mysql-01 与从库 db-mysql-02 均执行:
sudo apt update && sudo apt install -y mysql-server
11.2 主库配置
编辑 /etc/mysql/mysql.conf.d/mysqld.cnf:
[mysqld]
server-id=1
log_bin=mysql-bin
binlog_expire_logs_seconds=604800
gtid_mode=ON
enforce_gtid_consistency=ON
bind-address=0.0.0.0
sudo systemctl restart mysql
创建复制账号:
CREATE USER 'repl'@'192.168.10.%' IDENTIFIED BY 'Str0ng_Pass_2026';
GRANT REPLICATION SLAVE ON *.* TO 'repl'@'192.168.10.%';
11.3 从库配置
[mysqld]
server-id=2
gtid_mode=ON
enforce_gtid_consistency=ON
read_only=1
CHANGE REPLICATION SOURCE TO
SOURCE_HOST='192.168.10.21',
SOURCE_USER='repl',
SOURCE_PASSWORD='Str0ng_Pass_2026',
SOURCE_AUTO_POSITION=1,
GET_SOURCE_PUBLIC_KEY=1;
START REPLICA;
SHOW REPLICA STATUS\G
11.4 验收标准
Replica_IO_Running 与 Replica_SQL_Running 均为 Yes
Seconds_Behind_Source 为 0
主库写入数据后从库秒级同步
11.5 备份策略
每日 mysqldump 全备(--single-transaction),保留 7 天。
开启 binlog 并按 7 天保留,支撑时间点恢复。
生产环境建议启用半同步复制(rpl_semi_sync)。
12. 第 9 步:Redis 缓存
12.1 部署
可通过 1Panel 应用商店一键部署,或独立 Docker 运行:
docker run -d --name redis \
-p 192.168.10.23:6379:6379 \
-v /opt/redis/data:/data \
redis:8-alpine \
redis-server --requirepass 'Str0ng_Pass_2026' \
--appendonly yes --maxmemory 2gb --maxmemory-policy allkeys-lru
12.2 加固清单
bind 仅绑定内网 IP,开启 protected-mode
requirepass 使用强密码
重命名或禁用 FLUSHALL、FLUSHDB、KEYS、CONFIG 等危险命令
开启 AOF 持久化并按需设置 RDB
设置 maxmemory 与淘汰策略
12.3 验收
应用侧使用密码连接成功
重启容器后数据仍在(AOF 生效)
监控内存使用率与命中率
13. 第 10 步:1Panel 运维面板
13.1 安装
ops-1panel-01(Ubuntu 24.04,可用内存 1 GB 以上):
curl -sSL https://resource.fit2cloud.com/1panel/package/quick_start.sh -o quick_start.sh && sudo bash quick_start.sh
13.2 初始化配置
保存安装输出的访问地址(随机端口)与初始账号密码
首次登录修改密码并开启两步验证
面板访问限制为内网网段
配置网站默认目录与备份目录(可挂载飞牛 NFS)
13.3 应用与反代
应用商店安装 Nginx / OpenResty、MySQL、Redis、Gitea 等组件。
用 1Panel 反向代理统一收敛各 Web 服务入口。
后续将 1Panel 反代作为雷池 WAF 的源站。
版本说明
1Panel 当前为 v2.x(2026-07 已发布 2.2.4),同时 v1.10.34 LTS 仍在维护,安装命令一致。
14. 第 11 步:JumpServer 堡垒机
14.1 安装
独立虚拟机,官方要求 4 核 / 8 GB 起步:
cd /opt && curl -sSL https://github.com/jumpserver/jumpserver/releases/latest/download/quick_start.sh | bash
14.2 初始化
浏览器访问 http://192.168.10.25,使用 admin / ChangeMe 登录
首登强制修改密码
配置 HTTPS 证书
创建组织、用户与授权策略
添加 Linux 资产(SSH)、数据库资产(MySQL / Redis)、Windows 资产(RDP)
14.3 运维建议
全部业务虚拟机仅对 JumpServer 网段开放管理入口,日常运维统一经堡垒机。
对外仅暴露 80(Web)与 2222(SSH 代理),且只允许 VPN 网段访问。
15. 第 12 步:雷池 SafeLine WAF
15.1 安装
独立虚拟机(雷池官方要求与业务服务分离部署),先安装 Docker 与 Compose v2,再执行:
bash -c "$(curl -fsSLk https://waf-ce.chaitin.cn/release/latest/setup.sh)"
15.2 接入配置
管理面板访问 https://192.168.10.26:9443,手机 OTP App 扫码绑定
添加防护站点:域名 + 源站 IP:端口(如 1Panel 反代 192.168.10.24:80/443)
内网 DNS 将业务域名解析到雷池 IP
流量链路确认:客户端 → 雷池(80/443)→ 1Panel / 源站
先以「检测模式」运行观察,再切换「拦截」
管理口 9443 仅限内网访问
15.3 版本限制
社区版永久免费但最多防护 10 个站点(官方对比表),超出需购买商业版;规则库自动更新。
16. 第 13 步:UFW 防火墙加固
16.1 通用加固
所有 Linux 虚拟机执行:
sudo apt install -y ufw fail2ban
sudo ufw default deny incoming
sudo ufw default allow outgoing
sudo ufw allow from 192.168.10.0/24 to any port 22 proto tcp
sudo ufw enable
16.2 分角色放行端口
16.3 SSH 加固
PermitRootLogin prohibit-password
PasswordAuthentication no
全部虚拟机切换为密钥认证并禁用密码登录
fail2ban 已启用并配置 SSH jail
启用 unattended-upgrades 自动安全更新
16.4 验收
非授权网段访问受限端口被拒绝
授权网段访问正常
数据库 / 缓存端口仅应用服务器可达
17. 第 14 步:JetBrains 开发环境
17.1 方案选择
17.2 Gateway 远程开发
dev-jetbrains-01 创建专用开发账号并配置 SSH 密钥
本地安装 JetBrains Gateway(免费)
通过 SSH 连接 192.168.10.27
选择 IntelliJ IDEA(Ultimate)后端,等待自动部署
打开项目并验证编译、运行
开发账号仅经 JumpServer / 管理网段可达
提示
JetBrains 后端需 JetBrains 账号激活,Ultimate 需订阅;无订阅时可评估 VS Code Remote SSH 等替代方案。
17.3 备选方案
XRDP 桌面:安装 xfce4 + xrdp,防火墙放行 3389(仅管理网段)。
代码协作:可选用 1Panel 部署 Gitea 作为内网 Git 仓库。
18. 第 15 步:远程访问与安全边界
18.1 推荐做法
部署 Tailscale 或 WireGuard 组网(爱快内置 VPN 服务,OpenWrt 可装 WireGuard / Tailscale)
管理员通过 VPN 访问 1Panel、JumpServer、雷池管理口
对外统一入口仅为雷池 80 / 443
iDRAC 仅限管理网段或 VPN 访问
18.2 禁止项
禁止把 5666、9443、8080 等管理端口直接映射到公网。
禁止数据库、Redis 端口暴露在公网。
禁止使用默认口令(admin/admin、ChangeMe 等)。
19. 第 16 步:交付验收总清单
19.1 网络
爱快 WAN 拨号 / DHCP 正常,LAN 终端上网
DHCP 地址池与网关下发正确
OpenWrt 按需分流生效;旁路由故障不影响主路由
19.2 存储
飞牛 Web 可访问,SMART 可见
SMB 从 Windows / macOS 挂载成功
NFS 可被其他虚拟机挂载
19.3 数据
MySQL 主从复制两个线程正常、延迟为 0
主库写入后从库同步
Redis 密码认证与 AOF 持久化正常
19.4 运维与安全
1Panel、JumpServer 可登录并完成资产管理
JumpServer 能通过 2222 代理登录各服务器
雷池构造 SQL 注入测试请求被拦截并记录日志
UFW 从非授权网段访问受限端口被拒绝
19.5 开发与备份
JetBrains Gateway 连接开发机并成功编译运行项目
MySQL 定时全备执行成功
飞牛快照任务执行成功
ESXi 配置备份导出成功
至少完成一次恢复演练并记录结果
20. 运维与备份要点
监控建议:
iDRAC 邮件告警:硬件故障、风扇、电源、磁盘预测性故障。
ESXi:CPU / 内存 / 存储 I/O 与日志告警。
1Panel 监控:容器、磁盘、网站状态。
雷池:攻击日志周报与封禁名单复核。
升级节奏:组件升级前先做快照,按「测试机 → 生产」灰度,升级窗口避开业务高峰。
21. 版本与许可说明
22. 参考链接
免责声明
本文档中的 IP、账号与密码均为示例,实施时必须按现场环境替换;生产部署前请完成备份与恢复演练。