PA视讯PlayAce

服务器 2025-11-05

KunTai R722服务器硬盘故障问题分析

一、现网描述

1.1 环境描述

设备型号:KunTai R722

主板型号:S920X00-2*5250

 iBMC Version:3.11.00.27

BIOS Version:7.15

CPLD Version :2.00


二、故障描述

2.1故障现象

1台R722 硬盘故障,导致整机被上层腾讯云踢出


三、问题分析

3.1排查思路

查看current_event当前告警信息,设备当前无告警。

1b1206d78e64a0554ed62c97a12bc77e.png

查看sel事件记录,近期仅存在重启记录与硬盘更换记录,无其他异常。

image.png

查看RAID_Controller_Info.txt日志,当前RAID卡状态正常,模式为JBOD,Disk6有部分错误计数。

c2b68166324a9d03a74026e740ded627.png

c2b68166324a9d03a74026e740ded627.png

分析硬盘smart参数日志,发现Disk6参数异常,硬盘存在UNC和坏道。

dbc0603f243dcd51b0298a14e9c23e06.png

Message显示sdg有多次复位

0f31aa8484e3669b5523f07aa4809da7.png

Dmesg显示sdg有掉盘

0ca765281aeafc5e61c70507b75e4002.png


上升至原厂研发后判断该问题与其他厂商所遇问题一致,为上层腾讯云平台机制有关。

建议优先进行系统优化,防止再次出现整机剔除,后续进行硬盘固件版本升级。



3.2原因分析

综上,本次故障原因为硬盘Disk6产生UNC和重映射计数,业务侧对盘读写时IO时延高而剔除硬盘。


四、问题解决

4.1解决办法

硬件侧

更换问题硬盘Disk6,升级本批次设备中同型号希捷硬盘固件版本至SN04&SC04及以上,改进硬盘产生smart参数异常问题。

软件侧

建议OS侧排查是否合入SAS驱动补丁,如确定已合入则忽略此条;

建议业务侧读到报错UNC地址时,进行读修复(存储会采用多节点备份,从正常节点数据写到异常盘里)或不在持续读同一个报错地址,避免进入异常循环导致IO时延高。