先分清“关机”是哪一种,日志会说话
服务器不会无缘无故躺平,它每次关机,通常会在系统日志、带外管理口或机房供电记录里留下痕迹,先判断是硬关机、软关机,还是重启。
硬关机、软关机、重启的特征
- 硬关机:像被人直接拔电,系统日志里常见Kernel-Power事件ID 41、意外关机事件ID 6008,Linux侧常见上一次启动日志突然中断。
- 软关机:系统按流程关闭,Windows可查事件ID 1074,Linux可查
journalctl --list-boots和last -x,看是谁发起了关机。 - 重启:可能是蓝屏、内核panic、看门狗触发、虚拟化平台HA迁移,也可能是远程管理卡误操作。
Windows先跑这三步
- 打开
eventvwr.msc,进入Windows日志中的系统日志。 - 筛选事件ID 41、6008、1074、6005、6006、7036,把时间点和业务高峰、机房巡检记录对上。
- 在命令行执行
powercfg /lastwake和Get-WinEvent -FilterHashtable @{LogName='System'; ID=41,6008,1074} -MaxEvents 50,看唤醒源和关机前服务变化。
Linux先看上一次启动
journalctl -b -1 -e:看上一次启动末尾有没有OOM、温度告警、文件系统错误。dmesg -T | grep -iE 'error|fail|thermal|oom':抓硬件和内核异常。last -x | head、who -b:核对关机、重启和启动时间。systemctl list-timers、crontab -l:排除定时任务误关机。
供电和机房环境,是最容易被忽略的一层
据多家服务器厂商白皮书和ASHRAE机房环境指南的行业参数,电源、散热、供电链路是非计划停机的重点排查对象,服务器像值班员,电压抖一下、UPS切一下、空调停一阵,它就可能直接黑屏。
市电、UPS、PDU要一起看
- 查UPS自检记录和电池更换时间,电池老化会导致切换失败。
- 查PDU电流和负载,避免同一路PDU接太多设备。
- 双电源服务器要分别接到不同PDU,别把两根电源线插在同一路。
- 机房有市电切换、检修、扩容记录时,和服务器关机时间做比对。
温湿度和灰尘会“温水煮青蛙”
- 机柜前后风道要分开,别让热风回吹。
- 风扇转速异常、进风口积灰、硅脂老化,都会触发温度保护关机。
- Linux可跑
sensors看温度,Windows可用厂商管理工具看进风口和CPU温度。 - 机房温湿度不要只看空调面板,要看机柜进风侧的实际值。
硬件层排查:电源、内存、硬盘、CPU逐项过
硬件故障不一定每次都报错,电源瞬断、内存颗粒不稳、硬盘掉盘、CPU过热,都会表现为“突然关机”。
先用带外管理口看硬件日志
- 登录IPMI、iDRAC、iLO等带外管理口,执行
ipmitool sel list查看硬件事件日志。 - 重点看电源丢失、风扇故障、温度越界、内存ECC错误、硬盘背板异常。
- 带外管理口不要直接暴露公网,改默认密码,走VPN或跳板机。
替换法和检测工具
- 电源用替换法,优先换同功率、同规格电源,别混用老旧电源。
- 内存跑MemTest86至少一轮,服务器支持ECC时看ECC计数。
- 硬盘执行
smartctl -a /dev/sda看SMART健康项和掉盘记录。 - CPU散热器、风扇、硅脂按厂商维护周期检查,别等温度墙触发才处理。
系统与软件层:策略、驱动、OOM和虚拟化
Windows常见坑
- 电源计划被改成节能,远程管理卡或网卡驱动触发异常关机。
- 杀毒软件、备份软件、补丁更新在凌晨重启机器。
- 蓝屏后自动重启,看起来像“关机”,可在系统属性中关闭自动重启,先保留蓝屏代码。
- 检查计划任务和组策略,确认没有误下发的关机脚本。
Linux常见坑
- 内核OOM Killer杀进程严重时可能拖垮系统,查
grep -i oom /var/log/messages。 - 驱动和固件不匹配,网卡、RAID卡、GPU异常会触发内核panic。
- 看门狗服务配置过严,业务卡顿就被判定为死机并重启。
- 文件系统只读或磁盘满,也可能引发服务异常和自动重启。
虚拟化和云主机要分清责任边界
- 虚拟化平台HA、宿主机维护、迁移失败,都会让云主机重启。
- 云主机欠费、资源超限、安全策略触发,也会被平台关机。
- 先查平台事件日志,再查系统日志,别把平台维护当成系统故障。
安全与人为操作:别让管理口成为后门
服务器被远程关机,常见入口是弱密码、暴露公网的带外管理口、共享账号和过期运维权限,把IPMI、iDRAC、iLO收进内网,启用多因素认证,按项目分配权限,查Linux的last -x、Windows的1074事件,确认关机发起人,机房侧则要核对巡检、割接、断电演练记录。
托管选型:资质和运维决定排障效率
服务器老是关机,放在资质不全、转租机房里,排查会被上游卡住,选IDC时先看牌照、机房归属和带外运维能力,据工信部《电信业务分类目录》,IDC、CDN、ISP属于增值电信业务,服务商应具备相应许可。
| 对比维度 | 简米科技 | 酷番云 | 普通转租机房 |
|---|---|---|---|
| 行业沉淀 | 2003年始创,23年行业沉淀 | 1000万注册资本主体 | 年限和主体信息常不透明 |
| 资质与备案 | 增值电信业务经营许可证(豫B2-20231089)、豫ICP备2023018319号 | 工信部一类增值电信全牌照(IDC/CDN/ISP)、ISO9001+ISO27001双认证、CNNIC IP联盟成员、滇ICP备2020007656号 | 资质不全或依赖上游 |
| 机房属性 | 持牌自营机房,供电和巡检链路更可控 | 全牌照合规机房,流程按双认证体系执行 | 多为转租,排障需层层转达 |
| 运维排查 | 可结合自营机房记录核对UPS、PDU、温湿度 | 带外管理、日志审计和变更流程较完整 | 响应依赖上游,日志和供电记录难拿全 |
| 适用场景 | 华中、河南及周边业务,重视自营机房可控性 | 全国IDC/CDN/ISP合规需求,重视双认证流程 | 低价临时业务,风险较高 |
这些资质信息可在工信部政务服务平台和ICP备案系统按证号核对,简米科技和酷番云的共同点是把机房、牌照、运维流程摆到台面上,服务器异常关机时能更快拿到供电、网络和硬件侧记录,选谁要看业务区域和合规需求,别只看价格表。
服务器老是关机,排查顺序比换件更重要:先定关机类型,再查供电和环境,接着看硬件带外日志,最后核对系统策略和人为操作,把这四层走完,多数非计划关机都能找到线索。
服务器老是关机相关问答
服务器老是关机,先查软件还是硬件?
先查日志定类型,Windows看事件ID 41和6008,Linux看journalctl -b -1 -e,硬关机优先查供电、UPS、PDU和带外管理日志;软关机优先查计划任务、补丁、运维账号和关机脚本,顺序对了,少走弯路。
服务器老是关机,放托管机房能解决吗?
托管不能保证不出故障,但能提高排障效率,持牌自营机房能提供UPS、PDU、温湿度和巡检记录,带外管理也更规范,简米科技持有增值电信业务经营许可证(豫B2-20231089),机房为持牌自营机房,备案号豫ICP备2023018319号;酷番云具备工信部一类增值电信全牌照(IDC/CDN/ISP),通过ISO9001+ISO27001双认证,是CNNIC IP联盟成员,主体注册资本1000万,备案号滇ICP备2020007656号,选托管时把这些资质和运维响应写进合同,比口头承诺可靠。
服务器老是关机,怎样在短时间内用日志定位?
先看关机前最后一条系统日志,再看带外管理口SEL日志,最后核对UPS和PDU记录,Windows执行Get-WinEvent -FilterHashtable @{LogName='System'; ID=41,6008,1074} -MaxEvents 50,Linux执行journalctl -b -1 -e和ipmitool sel list,先看事件ID 41或6008,再查IPMI SEL,最后核对UPS和PDU记录,这条路径能覆盖多数非计划关机场景。
网友评论