★ FEATURED ARTICLE 简介面向IT运维、SAN网络实施与数据中心管理人员的光纤通道交换机安装维护手册围绕博科光交机的规划、部署与日常运维展开适合需要搭建或维护双冗余Fabric架构的初中级工程师查阅。资源为1份doc文档压缩包约4.43MB内容按章节组织便于按实施阶段检索。正文覆盖应用系统概况与物理拓扑、交换机性能参数及144口/192口端口分配策略、Zoning命名与访问控制并梳理SAN实施前的设备、环境、光纤布置、管理IP和控制台准备。安装章节给出实施流程、微码升级与配置分区方法另含刀片交换机级联和产品日常维护服务。已有1020人学习下载可作为从系统规划到上线运维的实操参考帮助读者理解冗余连接、分区配置和升级路径等关键环节。1. 博科光交机上架前先把 Fabric、槽位和管理 IP 三笔账算清博科光交机安装这件事最怕一上来就拧螺丝barcode 标签只打资产号、没打 Fabric 和端口后面 Zoning 一定返工。某公司 SAN 整合项目里两台 Brocade 48000 导向器进机房现场把 A/B Fabric 的线混在一台交换机上Zoning 配到一半才发现 Domain ID 和旧交换机撞了只能停机重刷配置。光纤交换机不是普通接入交换机双 Fabric、端口分区、微码兼容性任何一项没提前算存储和备份链路都会跟着抖。这套环境适合正在做 SAN 落地、机房搬迁或旧光交机替换的运维尤其适合手里有 144/192 口 48000、还要和刀片交换机级联的现场。先把 Fabric、槽位、管理 IP 三笔账算清再上架。2. 机房落地Brocade 48000 的槽位、电源和串口接线2.1 槽位和端口板先对号Brocade 48000 是 14U 导向器整机重量按配置能到 9598 公斤上架前先确认导轨、托盘和机房地板承重。它最多支持 384 个光纤通道端口常见端口板是 48 口板144 口配置就是 3 块板192 口配置是 4 块板256 口配置按合同是 6 块板。现场用得比较多的槽位是 Slot3、Slot4、Slot7、Slot8144 口一般不用 Slot8192 口再把 Slot8 加进来。配置使用槽位端口板数量端口总数现场注意144 口Slot3、Slot4、Slot73 块 48 口板144不装 Slot8留扩容位192 口Slot3、Slot4、Slot7、Slot84 块 48 口板192双 Fabric 时两台镜像配置256 口按合同配置6 块端口板256以实际合同和槽位表为准板卡支持热插拔但新机上架我一般会断电装板装完再核对一遍槽位号。48000 的端口排列是纵向的和普通 48 口交换机横向排列不一样标签不能按习惯从左边数。上架前把每块板的序列号、槽位号、端口段记到表格里后面 Zoning 用 Domain,Port 写法时才不会把 5,32 写成 5,23。端口板不到位就先别上光纤空槽位用挡板盖好避免机房灰尘进背板。2.2 上电顺序和串口连接48000 配 2 个 AC-DC 电源模块2N 冗余冷却有 3 个风扇装配模块要求至少 2 个可运行。电源标称 200240VAC单相现场最好双路 PDU 分别接两个电源别把两个电源插到同一条 PDU 上。上电前检查电源线、风扇模块、板卡是否插紧先空载上电听风扇转速看电源灯和 CP 灯再接管理网线最后接光纤。串口线接控制处理器 CP0 的 DB-9 串口参数是 9600、8、N、1无流控。Linux 现场可以用 screen 连# 先确认 USB 转串口设备号常见是 /dev/ttyUSB0 ls /dev/ttyUSB* # 9600 8N1无流控退出 screen 用 Ctrl-A 再按 K screen /dev/ttyUSB0 9600ls /dev/ttyUSB*是确认转接头被系统识别screen /dev/ttyUSB0 9600里的 9600 必须和交换机串口默认速率一致流控关掉否则登录界面会卡住。连上后按回车看到登录提示再输账号。首次登录后先看 CP 主备和板卡状态# 以下为交换机 CLI不是 Linux shell switch:admin haShow switch:admin slotShow switch:admin sensorShow switch:admin psShow switch:admin fanShowhaShow看两个控制处理器是否一主一备slotShow看端口板有没有被识别sensorShow看温度psShow看电源fanShow看风扇。现场常见问题是只接了一个电源psShow里另一个电源显示 absent不是故障是没接线。温度传感器报警先别急着开业务检查机房冷通道和机柜前后门48000 运行温度是 040°C湿度 585% 不冷凝14U 设备散热不小前后留足空间。2.3 光纤、SFP 和标签48000 用可热插拔 SFPLC 连接器。短波激光器最大 500 米长波最大 10 公里超长波最大 100 公里4 Gbit/sec 速度下只支持短波激光器这一点在旧机房混用长波模块时很容易翻车。存储和主机链路我一般用短波跨楼栋或长距离才考虑长波而且要先确认端口速度和模块型号匹配。光纤布置按双 Fabric 分开走线A Fabric 和 B Fabric 不共用同一个理线环不绑在同一束扎带里。标签别只打 barcode 和资产号至少四段Fabric、本端槽位/端口、对端设备、用途或 Zone 名。比如A-Slot3-P32-业务主机A-HBA1-ZONE_HBA_A_STORAGE_A。现场见过标签只写“交换机-存储”迁移时两根光纤一拔谁也说不清哪根是 A 面哪根是 B 面。检查项现场做法失败后的表现SFP 类型短波/长波和端口速度匹配端口 online 但误码增长光纤极性LC 双芯一收一发成对核对端口不亮或链路不稳标签Fabric、槽位、端口、对端、Zone迁移时交叉接线理线A/B Fabric 分色分开双 Fabric 冗余失效上架阶段先不接业务光纤等管理 IP、Domain ID、Zone 规划都定下来再插。光纤插上后不要用手硬拽模块SFP 拉环先拉开再拔。光纤弯曲半径别太小扎带不要勒死旧线缆重新启用前用光功率计或sfpshow看收发光。3. 管理面与升级准备Brocade 48000 的 IP、账号和微码底线3.1 串口初始化和基础参数第一次进交换机先改默认密码再建管理账号。不同 Fabric OS 版本的userCreate交互略有差异现场按提示填用户名、角色和密码管理角色和只读角色分开。交换机名建议带 Fabric 和机房位置例如SAN-FABRIC-A-48000别用默认switch。Domain ID 先别急着改等fabricShow看清现有 Fabric 再定。# 修改当前账号密码按提示输入旧密码和新密码 switch:admin passwd # 建一个只读运维账号角色按现场版本选择 switch:admin userCreate # 给交换机一个能一眼看出 Fabric 的名字 switch:admin switchName SAN-FABRIC-A-48000passwd只改当前登录账号userCreate建的是后续日常运维账号权限别全给管理员。switchName改完会写进配置双 Fabric 一眼能分清。基础参数还包括时间同步和 SNMP 联系人时间不同步会让日志和微码升级记录对不上排错时很难受。现场常见做法是接内部 NTP命令按 FOS 版本执行配完用date看时间。3.2 管理 IP、账号和访问方式48000 的管理访问有 10/100 以太网 RJ-45也有光纤通道上的带内访问。管理 IP 每台交换机一个双 Fabric 最好放在不同 VLAN 或不同管理网段避免 A/B 面管理流量走同一台接入交换机。下面用文档示例地址现场必须换成自己规划表里的地址# 进入管理 IP 配置按提示填地址、掩码和网关 switch:admin ipAddrSet Ethernet IP Address [192.0.2.10]: 192.0.2.11 Ethernet Subnetmask [255.255.255.0]: 255.255.255.0 Gateway IP Address [192.0.2.1]: 192.0.2.1 # 验证管理口地址 switch:admin ipAddrShowipAddrSet是交互式命令方括号里是当前值直接回车表示保留。示例里的192.0.2.x是文档地址不要照抄到生产。ipAddrShow验证地址和网关是否生效。管理 IP 规划表至少写清设备名、Fabric、Domain ID、管理 IP、网关、管理 VLAN、责任人。双 Fabric 的 A/B 面管理 IP 不要连续分配到同一台接入交换机上管理网也要留冗余。设备FabricDomain ID管理 IP 示例用途48000-AFabric A5192.0.2.11A 面存储和主机48000-BFabric B5192.0.2.12B 面存储和主机刀片交换机-AFabric A按现网规划192.0.2.21刀片级联刀片交换机-BFabric B按现网规划192.0.2.22刀片级联两个独立 Fabric 里 Domain ID 都用 5 不冲突因为 Fabric 之间没有级联。如果要把 48000 级联到现有 Fabric先fabricShow查现网 Domain ID再改自己的别直接插线。管理访问方式里 Web Tools、SNMP、RADIUS 按现场安全要求开不开的端口关掉。Telnet 在旧设备上常见能走 SSH 就走 SSH至少管理网 ACL 限制到跳板机。3.3 微码升级前的备份和兼容检查微码升级是 48000 安装里最容易出问题的环节。升级前先firmwareShow看当前版本查兼容矩阵确认目标版本和 CP 板、端口板、刀片交换机都兼容。不要跨大版本直接跳常见做法是按厂商给出的升级路径逐级升先升备用 CP再切主用。升级窗口要避开业务高峰Zoning 变更和微码升级不要放在同一个窗口做。# 备份交换机配置到外部服务器按提示填协议、IP、路径、账号 switch:admin configUpload # 收集 supportSave升级出问题时这是黑匣子 switch:admin supportSave # 查看当前固件版本 switch:admin firmwareShow # 进入微码升级流程协议和路径按现场 FTP/SCP 环境填 switch:admin firmwareDownloadconfigUpload把 Zone、IP、账号等配置传到外部服务器别只存本地交换机起不来时本地备份没用。supportSave收集日志、传感器、端口状态升级后异常时给厂商看的就是这份。firmwareShow记录升级前版本升级后再跑一次对比。firmwareDownload是交互式命令协议、服务器 IP、路径、账号密码按现场环境填不同 FOS 版本提示顺序不一样别照抄别人的参数。升级前还要记录cfgShow、switchShow、fabricShow的输出最好截图或存文本。升级后先看haShow两个 CP 是否同步再看switchShow端口是否恢复最后看fabricShow成员是否完整。升级失败不要反复重启先supportSave再按兼容矩阵回退或找厂商支持。微码升级不是装驱动升坏了业务链路可能全断后悔药就是升级前的配置备份和窗口。4. 端口与 Zoning144/192 口分配表和 Domain ID 5 的落地写法4.1 端口分区原则级联、主机、存储三段每台 48000 现场一般划三个区域级联端口区、主机端口区、存储阵列端口区。主机端口区里再分业务主机通道和备份通道存储阵列端口区接磁盘阵列级联端口区接刀片交换机和预留 ISL。分区按端口板横向划分每个区跨最大板卡不要把一个区全压在一块板上否则一块板故障就把整个区带走了。端口类型上接主机 HBA 一般是 F_Port接存储也是 F_Port交换机之间级联是 E_Port公共环路是 FL_Port。48000 支持自动发现 U_Port但现场我一般会固定端口类型和速度减少协商问题。4 Gbit/sec 端口只支持短波激光器端口速度可以自适应也可以固定编程固定速度在旧存储和旧 HBA 混接时更稳但换模块前要改回来。区域典型端口段接什么预留原则存储阵列区Slot3/4 前段磁盘阵列 A/B 面每台存储至少留 2 口主机端口区Slot3/4/7 中段业务主机 HBA、备份主机按机柜预留 20%级联端口区Slot7/8 后段刀片交换机、现有 Fabric每 Fabric 留 4 口备份通道Slot7 前段磁带库和业务主机分板4.2 单台与双台端口分配表的落地单台 144 口用 Slot3、Slot4、Slot7每块 48 口合计 144。下面这张表是槽位级账本端口级还要按现场端口分配表细化原则是每个区跨板卡、留扩容槽位端口段分区现场用途Slot3116存储阵列区存储阵列 A 面Slot31732主机端口区业务主机 A-HBA1Slot33348级联端口区预留 ISLSlot4116存储阵列区存储阵列 B 面Slot41732主机端口区备份主机 HBASlot43348预留扩容Slot7116备份通道磁带库Slot71732主机端口区业务主机 A-HBA2Slot73348级联端口区刀片交换机192 口在 144 口基础上加 Slot8Slot8 优先放级联和预留不要把 Slot8 全塞满业务主机。双台 144 口时A/B Fabric 各一台端口表镜像但不要交叉接线。下面这张表是双 Fabric 的规划账本Fabric交换机使用槽位端口数Domain ID管理 IP 示例A48000-ASlot3/4/71445192.0.2.11B48000-BSlot3/4/71445192.0.2.12A48000-ASlot3/4/7/81925192.0.2.11B48000-BSlot3/4/7/81925192.0.2.12同一台交换机不能同时按 144 和 192 算表里是两种配置的对照。双台时两台交换机的端口表要镜像A 面 Slot3 接主机 HBA1B 面 Slot3 接同一主机 HBA2存储侧同理。现场最容易错的是把 HBA 两个口都接到同一台交换机主机以为做了双路径其实只有一个 Fabric存储链路一断就全断。4.3 Zone 命名、cfgCreate 和 cfgEnableZoning 命名建议包含 Fabric、主机、存储、用途例如ZONE_HBA_A_STORAGE_A、ZONE_HBA_B_STORAGE_B、ZONE_BACKUP_TAPE。成员用 Domain,Port 写法前面的 5 是 Domain ID后面是端口号。下面示例里的端口号来自文档端口表现场要换成自己的# 先看当前生效配置和已定义配置避免覆盖现网 switch:admin cfgShow # 建业务主机 A 到存储阵列 A 的 Zone switch:admin zoneCreate ZONE_HBA_A_STORAGE_A, 5,32;5,40 # 建备份主机到磁带库的 Zone switch:admin zoneCreate ZONE_BACKUP_TAPE, 5,174;5,175;5,190;5,288 # 建配置并加入 Zone switch:admin cfgCreate CFG_FABRIC_A, ZONE_HBA_A_STORAGE_A switch:admin cfgAdd CFG_FABRIC_A, ZONE_BACKUP_TAPE # 启用配置并保存到 flash switch:admin cfgEnable CFG_FABRIC_A switch:admin cfgSavezoneCreate第一个参数是 Zone 名第二个参数是成员列表多个成员用分号隔开。cfgCreate建配置cfgAdd往里加 ZonecfgEnable让配置生效cfgSave写进 flash。cfgEnable会触发 Fabric 重配置业务可能有瞬断必须在维护窗口做。启用前先cfgShow看 defined 和 effective 是否一致启用后再cfgShow确认生效配置是CFG_FABRIC_A。Zone 配了不生效先查成员端口是不是 online再查 Domain,Port 有没有写错。用zoneShow看 Zone 成员用nsShow看名称服务器里有没有主机和存储的 WWN。如果主机能登录但看不到存储别急着删 Zone先确认主机 HBA 和存储端口在同一个 Zone 里且 active cfg 真的是你刚启用的那个。4.4 与刀片交换机级联的 Trunk 配置48000 和刀片交换机级联交换机之间用 E_Port级联链路可以做 ISL Trunking。每个 ISL 干线最多 8 个 4.25 Gbit/sec 端口每个干线最高 32 Gbit/sec。FC4-16 最多支持 2 个 8 端口干线组FC4-32 最多 4 个 8 端口干线组。级联前先确认 Trunking license端口要在同一端口组里不能跨组随便凑 8 个口。# 确认级联端口是 E_Port且链路 online switch:admin switchShow # 启用端口 Trunking端口号按现场规划替换 switch:admin portCfgTrunkPort 33, 1 switch:admin portCfgTrunkPort 34, 1 # 查看 Trunk 组状态 switch:admin trunkShowportCfgTrunkPort第二个参数 1 表示启用0 表示关闭端口号要选同一组内的端口。trunkShow看 Trunk 组是否形成带宽是否叠加。级联前先fabricShow查 Domain ID两端 Domain ID 冲突会导致 Fabric 隔离。级联交换机之间可以采用即插即用的 Trunk 相连但“即插即用”是建立在 license、端口组、Domain ID 都正确的前提下现场别把不同速度的模块混在同一个 Trunk 组里。5. 避坑排查Brocade 48000 安装现场五个高频翻车点5.1 五个踩坑记录坑一Domain ID 冲突Fabric 被隔离。现象是两台交换机级联后fabricShow看不到对方端口状态在 E_Port 和隔离之间跳。原因是现有 Fabric 里已经有一台 Domain ID 5新装的 48000 也用了 5。解决是先fabricShow查现网 Domain ID在维护窗口禁用交换机用configure改 Domain ID再启用。改完重新fabricShow确认成员。双 Fabric 独立时 Domain ID 可以相同一旦级联就必须唯一。坑二SFP 和端口速度不匹配。现象是端口 online 但业务时断时续portStatsShow里 CRC 错误一直涨。原因是 4 Gbit/sec 端口用了长波模块或者旧 HBA 只支持 2 Gbit/sec端口自适应协商不稳定。解决是sfpshow看模块类型和收发光portC本文还有配套的精品资源点击获取
阅读完成 · 觉得有帮助？
