Linux 系统挂起,利用SysRq诊断排除故障
nanshan 2024-10-15 11:31 27 浏览 0 评论
无论运行linux服务器,还是桌面,总有因为不明原因造成系统挂起。虽然挂起了,各种服务无法响应,但是linux的内核依然在运行,只要仍然可以响应键盘的按键中断请求,就有一线生机。我们可以用SrsRq,来抢救一下。
SysRq 其实是一系列按键的组合。它是由linux内核解释的,可以越过一些限制执行底层操作。因此,可以在系统挂起的时候(kernel panic 和 kernel freeze 除外),完成一些诊断和排除故障的操作。
SysRq 使用方式
SysRq,一般情况下,是 Alt + “Prt Scr" + <command key> 的组合。通过恰当的运用SysRq,可以保证数据安全的情况下重启,收集挂机状态时内存、CPU和进程状态等信息,还可能通过关闭一些进程恢复系统运行。
在一些键盘上,不能同时处理这么多的按键。你可以先按住 Alt 键,再按下 Prt Scr 键,松开弹起 Prt Scr 键,按下 <command key>,释放所有按键。当然,这完全依赖你的运气。
在 Proc 文件系统里,还有一个地方可以起到 SysRq 同样的效果。 可以将 <command key> 直接写入 /proc/sysrq-trigger 。这种方法在所有架构上通用。比如
echo b > /proc/sysrq-trigger #等效于 alt + prt + b
SysRq 配置
SysRq需要内核的支持,如要启用该功能,要确保内核已经加入了 CONFIG_MAGIC_SYSRQ 支持。现今的 Linux 发行版,大多已经加入了该功能的支持。如果要关闭,可以直接修改发行版 boot 目录下的 config-xxx 文件,重新编译内核即可。
grep "CONFIG_MAGIC_SYSRQ" /boot/config-`uname -r`
CONFIG_MAGIC_SYSRQ=y
也可以通过设置 /proc/sys/kernel/sysrq 的值来打开关闭该功能,或者实现功能的定制。
如要重启后保存,可以把 kernel.sysrq = values 写入 /etc/sysctl.conf 中。该 values 值可以是:
0 :完全关闭 SysRq 功能。
1 : 启动 SysRq 功能,没有阉割。
>1 的其他值: 组合开启下列不同的功能。
- 2 启用控制终端日志级别,可以自定义显示不同的信息。
- 4 启用键盘控制
- 8 启用进程的调试信息输出等
- 16 启动同步命令
- 32 启动重新挂载为只读
- 64 启动进程信号(终止、杀死、溢出杀死)
- 128 允许重启和关机
- 256 控制实时任务的优先级控制。
SysRq 键位介绍
Magic SysRq 使用的键位介绍,实际使用不区分大小写。
0-9 设置 console 日志级别,不同级别显示内容不同。
B 直接重启系统,不会同步磁盘缓存等。
C 故障转储。
E 向除 init 之外的所有进程发送 SIGTERM。安全停止除 init 之外的当前所有进程。
F 调用内存不足时结束器(Out Of Memory Killer),会终止一个消耗掉所有可用内存的进程。
H 在终端上显示 SysRq 组合键的帮助。
I 向除 init 之外的所有进程发送 SIGKILL,除 init 之外的所有进程被杀死,进程中的数据可能会丢失。
K 杀死当前终端下的所有进程。
L 向包括 init 在内的所有进程发送 SIGKILL。包括 init 在内的每个进程都会被结束,接下来也将无法使用 SysRq 组合键,你只有冷重启。
M 将内存信息输出到控制台。
N 降低实时任务的优先级
O 通过 ACPI 或在旧系统中通过 APM 关闭系统。
P 将当前的寄存器(registers)和标记(flags)输出到控制台。
Q 将所有定时器(timers)信息输出到控制台。
R 把键盘模式设置为 XLATE。
SysRq 查看信息
alt + SysRq + { M, P, T, W}
这些操作可以记录下当前系统的内存使用情况,当前 CPU 寄存器的状态,进程运行状态,以及所有 CPU 及寄存器的状态。通过这些信息,可以对挂起的原因做粗略的分析。
alt + SysRq + C
在一些特殊情况下,我们可能需要一份完整的 crashdump 。
系统恢复
根据系统不同的状态来尝试一些恢复。
E - I 组合恢复:过于暴力,并不比reboot强多少。系统服务多复杂,可能存在没有恢复的服务。
K 和 F 可以尝试一种其中,或者组合。
K - 结束与当前控制台相关的全部进程。如果X窗口某些程序内存或其他异常引起的挂起,可是尝试。
F - 会终止一个消耗掉所有可用内存的进程。OOM Killer 将根据各进程的内存处理情况选取最合适的“凶手”进程,并向其发送 SIGKILL 信号,中止其运行。 针对X桌面的程序引起的系统挂起,一般都为非关键应用。
N - 这对于由实时任务消耗 CPU 引起的系统挂起会起到立竿见影的作用。
安全重启
如果以上办法恢复系统,没有效果,或者得不偿失,那我们可以尝试安全的重启或者关机。
alt + SysRq + { R,E,I,S,U,B}
按下 Alt + SysRq,再逐次敲击 R E I S U B ,完成重启。每次看到提示 complete 字样,在进行下一个命令。测试的时候都没问题,关键的时候,你可能看不到任何提示,可以根据系统负载,等待10秒或更多时间,在敲击下一个命令。
安全关机,就需要把最后一个命令,替换为 O 。
安全问题
当你运行电脑离开一段时间,其他人可以不管有没有权限,直接用 SysRq 重启电脑。在开机 Grub 中修改启动参数,进入单用户模式。从而让你的密码成为摆设。
虽然这种情况一点也不常见,但也的确是一条攻击的途径。
相关推荐
- ssh终端xshell日志查看命令(xshell怎么看日志)
-
现在我们云服务器运维较多用的是SSH工具,其中常用的包括PUTTY、XSHELL等,其实大同小异界面UI稍微不同,但是都可以进入远程连接。这里有朋友提到如何查看服务器的日志文件,这个其实和是否使用XS...
- 使用 Fail Ban 日志分析 SSH 攻击行为
-
通过分析`fail2ban`日志可以识别和应对SSH暴力破解等攻击行为。以下是详细的操作流程和关键分析方法:---###**一、Fail2ban日志位置**Fail2ban的日志路径因系统配置...
- 如何高效读取Linux日志文件?这些命令要熟记于心!
-
在Linux系统中,日志文件通常存储在/var/log目录下。比如,/var/log/syslog(或/var/log/messages,视发行版而定)记录系统整体事件,/var/log/a...
- Windows服务器远程登录日志查询方法,linux查看登录日志方法
-
概述本文介绍Windows、Linux服务器查询系统的远程登录日志方法。根据服务器所使用的操作系统不同,有以下两种查询方法。Linux操作系统的登录日志查询通过远程连接登录Linux服务器,使用roo...
- iptables防火墙如何记录日志(防火墙日志查看)
-
例如:记录所有ssh服务的登录的日志首先,我们需要了解如何将所有的iptables的INPUT链数据包记录到/var/log/messages中。如果你已经有一些iptables规则了,那么将记录日志...
- 如何安全管理SSH密钥以防止服务器被入侵
-
SSH密钥安全管理实施指南(2025年更新版)一、密钥生成与存储规范高强度密钥生成bashCopyCodessh-keygen-ted25519-a100#生成ED25519算法密钥(比...
- 在CentOS上安装nginx服务器(centos搭建代理服务器)
-
一、环境描述1.虚拟机配置CPU:单核内存:2GB硬盘:120GBIP:10.24.17.1082.操作系统版本:CentOS6.6x86_64安装方式:Minimal3.虚拟化环境VM...
- CentOS7安全加固的一份整理规划建议
-
◆更新系统:及时更新CentOS7操作系统版本和安全补丁,确保系统以最新状态运行。◆关闭不必要的服务:在运行系统时,应关闭不需要的服务和端口,以减少系统暴露的攻击面。◆安装防火墙:使用iptables...
- 第四十七天-二叉树,centOS安装tomcat,Maven,vsftpd
-
学习笔记:1.Maven是Apache下的一个纯Java开发的开源项目。基于项目对象模型(缩写:POM)概念,Maven利用一个中央信息片断能管理一个项目的构建、报告和文档等步骤。Maven...
- Linux远程桌面连接使用教程 Widows终端远程连接Linux服务器
-
一、前言为什么不是远程连接Linux服务器?因为我不会,远程连接window我就用电脑自带的“远程桌面连接”。以下所述都是在CentOS操作系统下的。服务器刚换成Linux的时候很迷茫,感觉无从下手...
- CentOS 安全加固操作,保护你的操作系统
-
系统加固是保障系统安全的重要手段,对于维护企业数据安全、用户隐私以及系统稳定运行具有重要意义。加固后的系统更加健壮和稳定,能够有效减少因安全问题导致的系统故障和停机时间,提高系统的可用性和可靠性。通过...
- Dockerfile部署Java项目(docker如何部署java项目)
-
1、概述本文主要会简单介绍什么是Docker,什么是Dockerfile,如何安装Docker,Dockerfile如何编写,如何通过Dockerfile安装jar包并外置yaml文件以及如何通过do...
- CentOS7云主机部署Fail2ban阻断SSH暴力破解
-
关于Fail2banFail2ban可以监视你的系统日志,然后匹配日志的错误信息(正则式匹配)执行相应的屏蔽动作(一般情况下是调用防火墙屏蔽)例如:当有人在试探你的HTTP、SSH、SMTP、FTP密...
- 在CentOS7上用源码编译安装PostgreSQL
-
1、新建postgres用户#useraddpostgres&&passwdpostgres2、安装依赖包#yum-yinstallmakegccgcc-c++readline...
- pure-ftpd 使用(ftp prompt命令)
-
pure-ftpd是一个免费的ftp软件,其他介绍就不多说了。我们直接开始主题安装centosyuminstallepel-releaseyuminstallpure-ftpd配置备份原配置...
你 发表评论:
欢迎- 一周热门
-
-
如何在安装前及安装后修改黑群晖的Mac地址和Sn系列号
-
爱折腾的特斯拉车主必看!手把手教你TESLAMATE的备份和恢复
-
[常用工具] OpenCV_contrib库在windows下编译使用指南
-
Ubuntu系统Daphne + Nginx + supervisor部署Django项目
-
WindowsServer2022|配置NTP服务器的命令
-
WIN11 安装配置 linux 子系统 Ubuntu 图形界面 桌面系统
-
解决Linux终端中“-bash: nano: command not found”问题
-
NBA 2K25虚拟内存不足/爆内存/内存占用100% 一文速解
-
Linux 中的文件描述符是什么?(linux 打开文件表 文件描述符)
-
K3s禁用Service Load Balancer,解决获取浏览器IP不正确问题
-
- 最近发表
- 标签列表
-
- linux 查询端口号 (58)
- docker映射容器目录到宿主机 (66)
- 杀端口 (60)
- yum更换阿里源 (62)
- internet explorer 增强的安全配置已启用 (65)
- linux自动挂载 (56)
- 禁用selinux (55)
- sysv-rc-conf (69)
- ubuntu防火墙状态查看 (64)
- windows server 2022激活密钥 (56)
- 无法与服务器建立安全连接是什么意思 (74)
- 443/80端口被占用怎么解决 (56)
- ping无法访问目标主机怎么解决 (58)
- fdatasync (59)
- 405 not allowed (56)
- 免备案虚拟主机zxhost (55)
- linux根据pid查看进程 (60)
- dhcp工具 (62)
- mysql 1045 (57)
- 宝塔远程工具 (56)
- ssh服务器拒绝了密码 请再试一次 (56)
- ubuntu卸载docker (56)
- linux查看nginx状态 (63)
- tomcat 乱码 (76)
- 2008r2激活序列号 (65)