Ryan

记一次故障处理:GPFS挂载失败
一、故障情况2019年4月14日客户报IBM小机有软件故障,GPFS文件系统无法挂载。二.处理过程首先检查errp...
扫描右侧二维码阅读全文
14
2019/04

记一次故障处理:GPFS挂载失败

一、故障情况

2019年4月14日客户报IBM小机有软件故障,GPFS文件系统无法挂载。
gpfs-mount-failed.jpg

二.处理过程

首先检查errpt,发现fscsi2线路故障。首先对线路进行排查,使用了未使用的光模块替换了该机器连接的光纤交换机的1/8和2/8接口的光模块。
重新启动GPFS服务还是无法使用。

# mmshutdown
# mmstartup

然后尝试重启系统。
重启系统后半小时后还无法通过网络连接该服务器。使用HMC查看发现分区处于ERROR状态。查看ASM管理。发现是位于P1-C7槽位的45D5063(IB卡)和46Y3513(TMPD卡)故障。

Platform Event Log - 5040241A
Created at :    04/12/2019 19:47:52
Driver Name :    fips712/b0316a_1160.712
Subsystem :    Service Processor Firmware
Event Severity :    Predictive Error
Action Flags :    Report to Operating System
   Service Action Required
   HMC Call Home
Action Status :    Reported to Opr Sys
   HMC-Acknowledged

   
Primary System Reference Code

   
Reference Code :    B181B941
Hex Words 2 - 5 :    030000F0 2A5C0510 D1003202 400000FF
Hex Words 6 - 9 :    00880200 0000000C 80000020 00000005

   

   
Normal Hardware FRU
Priority :    Medium Priority
Location Code :    U78A0.001.DNWK14R-P1-C7
Part Number :    45D5063
CCIN :    52B4
Serial Number :    YH11KW11906F
MFG Replacement Unit Id :    0x00040000

   
Normal Hardware FRU
Priority :    Medium Priority B, replace these as a group
Location Code :    U78A0.001.DNWK14R-P1-C12
Part Number :    46Y3513
CCIN :    2A0F
Serial Number :    YL10W02210EH

   
Maintenance Procedure Required
Priority :    Medium Priority A, replace these as a group
Procedure Number :    FSPSP45

   
Normal Hardware FRU
Priority :    Medium Priority C, replace these as a group
Location Code :    U78A0.001.DNWK14R-P1
Part Number :    74Y2947
CCIN :    2A5C
Serial Number :    YL10HA0840A1
MFG Replacement Unit Id :    0x00090000

根据ASM指示,需要更换这两张扩展卡。
尝试关机重新插拔该板卡,开机一切正常。
嗯GPFS也挂载成功。

三.翻查了一下历史故障处理,发现上海的京沪穗P755也曾经遇到该故障。

搬瓦工年付$187机房套餐补货了,电信联通优化,512M内存/500G流量/1G带宽,建站稳定,优惠码:BWH1ZBPVK,【点击购买】!
搬瓦工年付$28CN2高速线路,512M内存/500G流量/1G带宽,电信联通优化,延迟低,速度快,建站稳定,优惠码同上,【点击购买】!
Last modification:May 2nd, 2019 at 01:02 pm
If you think my article is useful to you, please feel free to appreciate

Leave a Comment