业务运行过程中，Linux系统僵死，屏幕无任何有效打印信息，网络中断、键盘鼠标没有任何响应。这种故障现象，可能是因为Linux内核死锁导致。由于无任何有效打印信息，内核日志中也没有记录，就无法定位故障根因。   如何让Linux内核在僵死前打印相关信息，对问题定位尤为关键。其中一个有效手段是打开“Kernel Hacking”选项，然后重新编译内核。 对于Linux内核死锁有帮助的几个配置选项有： [*] Detect Soft Lockups [ ] Panic (Reboot) On Soft Lockups [*] Detect Hung Tasks (120) Default timeout for hung task detection (in seconds) [*] Panic (Reboot) On Hung Tasks [ ] Lock usage statistics [ ] Spinlock debugging: sleep-inside-spinlock checking     下面一个实例是在SLES11.1 2.6.32.12-0.7内核中系统僵死前，检测到内核死锁并panic，打印出了死锁进程和信息。 ftp           D ffff88010d7c5978  4472 22481   […]

内核空间（Kernel Space）与用户空间（User Space） 内核空间可以访问所有的CPU指令和所有的内存空间、I/O空间。 用户空间只能访问有限的资源，若需要特殊权限，可以通过系统调用获取相应的资源。 用户空间允许页面中断，而内核空间则不允许。 x86 CPU中用户空间是0-3G的地址范围，内核空间是3G-4G的地址范围。x86_64 CPU用户空间地址范围为0x0000000000000000 – 0x00007fffffffffff，内核地址空间为0xffff880000000000~最大地址。 内核空间和用户空间是针对线性地址空间的。 所有内核进（线）程共用一个地址空间，而用户进程都有各自的地址空间。

在Linux内核死机或内核打印异常栈信息时，这些打印的含义是什么？下面作一个简单解释。   Oops: 0002 [1] SMP CPU 3 Pid: 19394, comm: stress Tainted: GF U (2.6.5-7.244-smp SLES9_SP3_BRANCH-200512121832250000) RIP: 0010:[<ffffffff8016e5ad>] <ffffffff8016e5ad>{free_block+237}   Oops：表示当前内核故障类型 002：页面错误码，表示内核试图写一个不存在的页面 [1]：死机计数器，记录册从上次系统重启以来的死机次数 CPU：表示系统运行故障时所在的CPU Pid：系统故障时，运行的进程 RIP：系统故障时，执行的指令位置

在Linux内核源码中提供了读写CPU MSR寄存器模块，使可以在用户空间直接读写MSR寄存器。 开源社区提供msr寄存器读写工具msrtools，其中有两个命令，rdmsr/wrmsr。要使rdmsr/wrmsr命令真正可以读写msr寄存器，系统中必须有msr模块，或将msr模块编译进内核，下面是从内核配置选项中选取的内容。 Processor type and features  —> <M> /dev/cpu/*/msr – Model-specific register support 实例： root@ubuntu:~/linux-2.6.32.36-0.5# rdmsr 0x1a0 0 root@ubuntu:~/linux-2.6.32.36-0.5# rdmsr和wrmsr命令格式如下： root@ubuntu:~# rdmsr Usage: rdmsr [options] regno –help         -h  Print this help –version      -V  Print current version –hexadecimal  -x  Hexadecimal output (lower case) –capital-hex  -X  Hexadecimal output (upper case) –decimal      -d  Signed decimal output –unsigned     […]