ARTICLE · INTELLIGENCE

战地情报 · 详情页

来自尧图项目组的一线实战观察与深度解析

HP EVA4400磁盘阵列安装配置与排障实战指南

HP EVA4400磁盘阵列安装配置与排障实战指南 简介这份PDF是针对HP StorageWorks EVA4400企业虚拟阵列的官方安装指南适合负责企业存储部署与运维的IT专业人员、系统管理员及存储工程师也可作为研究高端磁盘阵列实施方案的参考资料。包体包含1个PDF文件大小仅2.15MB内容完整覆盖安装前期规划、场所准备、硬件拆装、机架固定、系统配置、RAID组创建及后续维护等全流程。文档特别说明了WWN与序列号定位、订阅服务及HP技术支持渠道并附有安装清单和视频资源指引。目前已有190人学习对于需要自主部署EVA4400或了解企业级存储阵列实施流程的读者这份指南能帮助规避机架稳定性、电源环境等常见风险是一份实用且精炼的官方操作手册。 前阵子做数据迁移翻出一份《HP EVA4400 磁盘阵列安装说明.pdf》结果好几个同行跑来问这套老设备到底还能不能折腾。EVA4400 是惠普当年很主流的企业级虚拟化磁盘阵列双控制器冗余后端挂盘柜前端走光纤巅峰时期几乎每个数据中心机房里都能看到它的影子。现在虽然全闪、分布式存储满地跑但存量环境里 EVA4400 还在不少机房里稳定运行着核心业务。这篇文章我按实际部署的顺序把从硬件上架、连线到 Command View EVA 初始化、主机映射、多路径配置的完整流程拆开讲最后附上我这些年踩过的坑。无论你是刚接触这套系统的运维新人还是被临时叫去接手老存储的救火队员都能直接照着操作。1. 先搞清 EVA4400 是什么1.1 阵列形态与硬件组成EVA4400 整套系统最核心的部分是 2U 的控制器机箱里面装两块 HSV 控制器互为双活。每块控制器上有缓存和后备电池后端通过 SAS 线连接 M6412 之类的磁盘柜前端则是 4Gb 光纤端口用来对接主机或者光纤交换机。操作系统层面根本看不到物理盘只能看到控制器虚拟化出来的 LUN。硬盘类型上EVA4400 通常支持 FC 盘、SATA 盘FATA和后期加入的 SAS 盘。FC 盘转速快适合数据库这种高 IOPS 场景SATA 盘容量大适合归档和备份。这个阵列最有意思的地方在于它不像传统 RAID 卡那样把几块盘绑成一个固定 RAID 组而是把所有物理盘扔进一个动态磁盘池里上层创建虚拟磁盘时再动态决定冗余方式。所以第一次用 EVA 的人经常会觉得抽象但这恰恰是它最大的优点换盘不用手动重建备盘是全局的控制器自动管理数据布局。1.2 虚拟化存储的核心概念用 EVA 必须理解四个词Disk Group磁盘组、Vdisk虚拟磁盘、LUN 和 Vraid。Disk Group 是物理盘的集合若干块不同型号的硬盘放进一个组里变成共享存储池在这个池上划出来的逻辑卷叫 VdiskVdisk 再映射给主机主机看到的就是一个 LUN。Vraid 是 EVA 的虚拟 RAID 级别支持 Vraid0、Vraid1、Vraid5、Vraid6其中 Vraid5 相当于传统 RAID5Vraid6 相当于 RAID6。这套设计带来一个很实际的好处备盘不用固定指定给某一个 RAID 组。比如有 30 块盘你设定 2 块备盘那么任意一块盘故障控制器会从这 2 块备盘里挑一块自动顶上数据重建过程对主机基本无感。传统阵列如果某个 RAID 组的专属备盘被用掉了新盘上新前就只能干等这在 EVA 上是不存在的。理解了这一点后面所有配置流程就顺了。2. 硬件安装与连线细节2.1 上架与硬盘安装注意事项拿到设备后第一件事不是插电而是核对硬件清单控制器机箱、盘柜、硬盘、光纤线、SAS 线、电源线。按说明书建议盘柜在机柜里要优先放在控制器下方既能走线顺畅又能避免线缆被其他设备压住。硬盘安装时要戴防静电手环硬盘槽位顺序没有强制要求但建议按盘柜标签从低位到高位插方便后续在软件里辨认位置。我要强调一个很多人容易忽略的细节EVA4400 的盘柜虽然支持硬盘热插拔但首次上电前最好把所有硬盘都装好再开机尽量避免“先开机、后插盘”的启动顺序。因为首次启动时控制器会扫描盘柜拓扑如果硬盘缺失它可能把当前状态当成正常运行后续新盘插入后虽然能识别但报错信息里会多出一些干扰项排查故障时容易误导方向。2.2 FC 与 SAS 连线拓扑EVA4400 的连线分三条链路管理链路、后端链路、前端链路。管理链路是控制器上的以太网口用于连接管理网络供 Command View EVA 发现和配置后端链路是控制器到磁盘柜之间的 SAS 连接两条控制器必须分别连到两个盘柜 I/O 模块形成冗余前端链路是控制器 FC 口到主机或光纤交换机的连接。连接线时有个原则控制器 A 和控制器 B 的后端线要交叉覆盖而不是只连自己这一侧。也就是说控制器 A 的 SAS 口既要连盘柜 A 的 I/O 模块也要连盘柜 B 的 I/O 模块控制器 B 同样如此。这样任何一个控制器故障另一个还能访问所有盘柜否则故障发生时另一台控制器可能只能看到一半磁盘整个存储池都会受影响。前端链路建议不要直接点对点连服务器 HBA 口除非你只有一两台测试机。生产环境一定要经过光纤交换机并在交换机上做 Zone 隔离方便后续虚机迁移和主机更换。管理口更简单一根网线接到管理交换机记住初始 IP 别和现有网段冲突。2.3 上电后的自检与状态判断连线完成后先给盘柜上电等 30 秒左右再给控制器上电。控制器开机后会有一两分钟的自检过程前面板 LED 会依次闪烁风扇高速转动后逐渐降速。这时候别着急接管理软件先看硬件状态电源灯绿色常亮、控制器状态灯为绿色且不闪烁盘柜 I/O 模块没有黄色报警。我在现场遇到过好几次看似矛盾的状况控制器面板全绿但 CVE 软件里就是提示某个电池在充电。原因是 EVA4400 的缓存电池在运输和断电存放期间电量耗尽上电后会自动进入充电和校准流程这期间系统可能会把缓存改成直写模式性能暂时下降界面会有黄色信息而不是红色故障。很多新手看到这个信息就慌其实只要给它几小时完成校准状态会自动恢复正常。3. 用 Command View EVA 初始化阵列3.1 管理软件安装与存储系统发现EVA4400 的管理软件叫 Command View EVA通常装在 Windows Server 或 Linux 服务器上也可以装在一台专用的管理工作站上。安装过程比较常规但要留意 Java 环境的版本版本太新反而可能连不上老存储建议按安装文档选配套的版本。软件装好后第一次打开需要搜索未配置的存储系统。有两种方式一是手动输入控制器的管理 IP 直接添加二是用自动发现功能扫整个网段。自动发现适合控制器还是默认 IP 的场景它会通过广播包找到未初始化的系统。找到存储系统后界面会让你设置管理员密码、日期时间和管理网络参数。这一步一定要记好管理密码和序列号后期做配置备份和故障恢复全都要靠它们密码忘了会很麻烦。3.2 创建磁盘组与 Vdisk 的细节存储系统被管理软件接管后第一件事是创建 Disk Group。在 Command View EVA 里选中存储系统右键进入 Disk Group 创建向导。关键是选对磁盘类型FC 盘和 SATA 盘不要混在一个组里性能差异过大反而拖慢整体。设置 Disk Group 名称后界面会让你勾选加入到该组的物理盘并设置备盘数量。我的习惯是一个组至少留 2 块备盘补盘周期短的机房可以少留但为了安全还是建议留足。创建 Disk Group 的过程其实就是把物理盘格式化并纳入存储池需要几分钟到十几分钟不等。完成后继续创建 Vdisk输入名称选择容量大小再选 Vraid 级别。如果你不确定数据安全优先选 Vraid5容量利用率高且能承受一块盘故障对安全性要求极高的核心卷选 Vraid6能扛两块盘同时故障。创建时还要留快照空间建议按卷容量的 20% 预留否则后续想开快照会提示空间不足。3.3 把 LUN 映射给主机Vdisk 创建完主机还看不到它必须做 LUN 映射。在 CVE 的 Vdisk 上右键选择向主机呈现Present会弹出一个主机管理界面。第一次操作时需要新建主机条目这里要用到主机 HBA 卡的 WWPN 号可以在主机的 FC HBA 配置工具里查到或者在光纤交换机上看。新建主机时把主机名起规范比如web-01-data方便以后识别。然后把该主机所有 HBA 端口的 WWPN 都加进去再选择要映射的 Vdisk 和 LUN ID。LUN ID 可以手动指定也可以让它自动分配。建议 LUN ID 从 0 开始连续编号避免主机侧出现重复或跳号。映射完成后不需要重启主机重新扫描一下总线就能看到新磁盘。4. 主机接入与多路径配置4.1 Windows 主机接入步骤Windows 主机接入 EVA 前先装好 FC HBA 卡驱动再用 HBA 卡厂商的管理工具确认链路已经连上且能看到存储端口 WWPN。如果一切正常在磁盘管理里重新扫描就应该出现一个新的裸盘状态是“未初始化”。这时千万不能急着初始化先把多路径软件装上。EVA 推荐用 Windows MPIO 配合厂商提供的 DSM或者直接装 HP 的多路径驱动。安装完成后在 MPIO 的“发现多路径”里勾选对应设备类型然后重新扫描磁盘系统就会自动把所有可用路径合并成一个虚拟磁盘。我遇到过有人没装多路径直接初始化磁盘结果每次重启偶尔出现盘符失联原因就是单路径故障切换不稳定应用写盘直接报错。另外分区时建议用 GPT 分区表容量上限高也不受 MBR 2TB 的限制。4.2 Linux 主机接入与 multipath 配置Linux 主机相对麻烦一点关键是 multipath 配置。先确认系统装好了device-mpper-multipath包然后在/etc/multipath.conf里把 EVA 的设备参数单独写好。重点配置devices段把厂商识别为HP型号识别为EVA相关的 product ID并设置path_selector和failback策略。路径策略建议用round-robin或queue-length不要默认service-time在某些老内核上的糟糕表现。配置好后启动multipathd再用multipath -ll检查正常情况下应该看到一条路径数为双数比如 4 条的映射设备。如果只看到一条路径先检查光纤交换机 Zone 是不是把两个控制器端口都加了进来再检查 HBA 卡有没有连接两个控制器。很多 Linux 挂载问题最后查下来都是 Zone 少配了一半。文件系统方面XFS 或 ext4 都可以但高负载场景我更偏向 XFS在线扩容能力好一些。4.3 光纤交换机 Zone 划分规范EVA 要稳定运行光纤交换机的 Zone 划分必须提前规划好。我的标准做法是每个主机 HBA 端口单独一个 Zone只加入该主机端口和它需要访问的存储前端端口。不要图省事把一个 Zone 塞进多个主机口否则遇到链路抖动个别主机可能因为相互影响出现意外的 IO 中断。具体操作是在交换机上创建 alias先把主机 WWPN 和存储 WWPN 分别加进两个 alias再以这两个 alias 建 Zone最后把这些 Zone 加入同一个 Zone Config 并激活。激活前一定仔细检查激活后顺手用命令查看 Zone 成员有没有出错。分区和 LUN 映射实际上是两层访问控制Zone 不正确CVE 里映射做得再完美主机也看不见盘。5. 常见问题与排障实录5.1 管理端发现不了存储系统我在现场最常遇到的问题是 Command View EVA 搜不到存储系统。先检查控制器管理口指示灯是否正常管理口 IP 是否和电脑能互通直接 ping 一下控制器管理 IP。如果 IP 本来就知道且能 ping 通但 CVE 发现不了多半是软件版本和 Java 环境问题换个兼容版本重装一次基本能解决。如果你的存储系统之前被人配置过 IP 但没人记录会麻烦一点。可以通过串口线连接控制器的维护口或者临时把管理口改成 DHCP从路由器里看到新分配的 IP再反推去找。记得处理完后把 IP 固定下来并写进设备台账这种“找不到管理端”的故障绝大多数都是因为 IP 记录缺失属于人为问题。5.2 电池和控制器报警处理控制器缓存电池老化是 EVA4400 上最常见的逐级报警。现象是 CVE 里显示BBSU Failsafe或Battery charging控制器缓存从写回模式变成直写模式数据库类应用会明显变慢。处理方式是先判断电池是否真的失效还是单纯需要校准。刚上电不久出现的多为校准阶段等几小时就会自己恢复如果用了四五年的设备频繁报警多半要更换电池备件。控制器报警还有一种是缓存数据写入失败常见于异常断电后重新加电。这类故障需要在 CVE 界面查看具体日志不要盲目重启控制器否则可能触发缓存数据丢失或更严重的状态。我的经验是一旦出现控制器自动 Failover先把故障控制器摘掉单独接管理口抓日志再决定要不要切换回来。5.3 硬盘故障与更换流程EVA4400 盘柜里某块盘亮琥珀色故障灯对应的 CVE 事件会显示磁盘状态变为 Failed。此时盘上的数据会迁到备盘业务不受影响。但要注意它不像传统 RAID 卡那样有一块明确的“热备盘”在那边等着而是控制器根据数据分布自动把故障盘的数据重建到其他空闲盘上所以重建过程不只是恢复一份副本那么简单需要持续一段时间。换盘时先在 CVE 里找到故障盘的物理位置最好用软件的点亮磁盘位置功能让盘柜上的定位灯亮起来再动手拔盘。新盘插入后控制器自动识别并加入可用容量池。切记不要同时拔出多块故障盘尤其是 Vraid5 卷区同时坏两块盘数据就悬了。换完盘后观察半小时确认盘状态变成 Normal 再离开现场。5.4 配置备份与版本管理每次做完配置变更第一件事是导出存储配置备份。CVE 里支持导出配置到本地文件包含 Vdisk、映射、主机等信息用文本编辑器就能打开看。整个过程花费不到五分钟但遇到控制器双故障这种极端场景它就是你的救命稻草。版本管理方面也要留心控制器的 XCS 微码、CVE 软件版本、主机端多路径驱动版本存在兼容矩阵。升级前最好先查一下三者的对应关系尤其控制器微码升级到一半如果失败会导致整个存储系统短暂不可用。我建议非必要不升级升级前先备份配置并选业务低峰期操作。6. 最后说几句个人体会这套 EVA4400 前前后后陪了我太多年我最大的体会是它并不难难的是规划和记录。很多人拿到安装说明就急着配等出了故障再回来翻才发现 IP 没记、WWPN 没记、盘柜拓扑也没画全靠一台一台去猜。设备再老按部就班操作它一样能稳定扛住业务。如果大家在实际安装中遇到了别的奇怪现象欢迎在下面留言交流我把后续的经验也一并整理出来。本文还有配套的精品资源点击获取
RELATED READING

延伸阅读

更多一线实战笔记与深度复盘,助您持续精进