[root@localhost ~]# rpm -qa|grep lsof
lsof-4.82-4.el6.x86_64
在终端下输入lsof即可显示系统打开的文件,因为 lsof 需要访问核心内存和各种文件,所以必须以 root 用户的身份运行它才能够充分地发挥其功能。每行显示一个打开的文件,若不指定条件默认将显示所有进程打开的所有文件。
lsof - list open files Lsof revision 4.82 lists on its standard output file information about files opened by processes for the following UNIX dialects: AIX 5.3 Apple Darwin 9 (Mac OS X 10.5) FreeBSD 4.9 for x86-based systems FreeBSD 7.[012] and 8.0 for AMD64-based systems Linux 2.1.72 and above for x86-based systems Solaris 9 and 10 An open file may be a regular file, a directory, a block special file, a character special file, an executing text reference, a library, a stream or a network file (Internet socket, NFS file or UNIX domain socket.) A specific file or all the files in a file system may be selected by path.
fuser - identify processes using files or sockets fuser displays the PIDs of processes using the specified files or file systems. In the default display mode, each file name is followed by a letter denoting the type of access: fuser outputs only the PIDs to stdout, everything else is sent to stderr.
lsof(list open files)是一个列出当前系统打开文件的工具。在linux环境下,任何事物都以文件的形式存在,通过文件不仅仅可以访问常规数据,还可以访问网络连接和硬件。所以如传输控制协议 (TCP) 和用户数据报协议 (UDP) 套接字等,系统在后台都为该应用程序分配了一个文件描述符,无论这个文件的本质如何,该文件描述符为应用程序与基础操作系统之间的交互提供了通用接口。因为应用程序打开文件的描述符列表提供了大量关于这个应用程序本身的信息,因此通过lsof工具能够查看这个列表对系统监测以及排错将是很有帮助的。
解释
[root@localhost ~]# man lsof 看了两个多小时,包括所有的选项,输出格式的每个字段的解释,样例等 If any list request option is specified, other list requests must be specifically requested 就是说选项必须被明确地指定。-U列出socket,不会列出nfs files,除非指定-N。 Normally list options that are specifically stated are ORed 正常列表默认是或的关系,比如 -i -ufoo,列出所有的网络文件或者属于进程所有者为foo的列表。 lsof -a 表示两个参数都必须满足时才显示结果 明确用-a指定为与关系 lsof输出各列信息的意义如下:man lsof对此有详尽的解释 COMMAND: 进程的名称 PID: 进程标识符 USER: 进程所有者 FD: 文件描述符,应用程序通过文件描述符识别该文件。如cwd、txt等 TYPE: 文件类型,如DIR、REG等 DEVICE: 指定磁盘的名称 SIZE: 文件的大小 NODE: 索引节点(文件在磁盘上的标识) NAME: 打开文件的确切名称 FD 列中的文件描述符 1.cwd 值表示应用程序的当前工作目录,这是该应用程序启动的目录,除非它本身对这个目录进行更改 2.txt 类型的文件是程序代码,如应用程序二进制文件本身或共享库,如上列表中显示的 /sbin/init 程序。 3.mem 4.rtd 5.其次数值表示应用程序的文件描述符,这是打开该文件时返回的一个整数。如上的最后一行文件/dev/initctl,其文件描述符为 10。 u 表示该文件被打开并处于读取/写入模式,而不是只读(r)或只写(w)模式。 W 表示该应用程序具有对整个文件的写锁。该文件描述符用于确保每次只能打开一个应用程序实例。 [root@CentOS5 ~]# lsof|grep W(写锁) lsof|grep unix (其实就是套接字) lsof|grep FIFO(其实就是管道) lsof|grep Ipv4(其实就是tcp/ip) 初始打开每个应用程序时,都具有三个文件描述符,从 0 到 2,分别表示标准输入、输出和错误流。所以大多数应用程序所打开的文件的 FD 都是从 3 开始。 sshd 26592 root 5r FIFO 0,6 1882595 pipe sshd 26592 root 6w FIFO 0,6 1882595 pipe unix 0xf1e75c80 FIFO 0,6 FIFO 8,3 IPv4 10338 Type 列则比较直观。文件和目录分别称为 REG 和 DIR。而CHR 和 BLK,分别表示字符和块设备; 或者 UNIX、FIFO 和 IPv4,分别表示 UNIX 域套接字、先进先出 (FIFO) 队列和网际协议 (IP) 套接字。
命令列表
lsof `which httpd` //那个进程在使用apache的可执行文件 lsof /etc/passwd //那个进程在占用/etc/passwd lsof /dev/hda6 //那个进程在占用hda6 lsof /dev/cdrom //那个进程在占用光驱 lsof -c sendmail //查看sendmail进程的文件使用情况 lsof -c courier -u ^zahn //显示出那些文件被以courier打头的进程打开,但是并不属于用户zahn lsof -p 30297 //显示那些文件被pid为30297的进程打开 lsof -u1000 //查看uid是100的用户的进程的文件使用情况 lsof -utony //查看用户tony的进程的文件使用情况 lsof -u^tony //查看不是用户tony的进程的文件使用情况(^是取反的意思) lsof -i //显示所有打开的端口 lsof -i:80 //显示所有打开80端口的进程 lsof -i -U //显示所有打开的端口和UNIX domain文件 lsof -i UDP@[url]www.akadia.com:123 //显示那些进程打开了到www.akadia.com的UDP的123(ntp)端口的链接 lsof -i tcp@ohaha.ks.edu.tw:ftp -r //不断查看目前ftp连接的情况(-r,lsof会永远不断的执行,直到收到中断信号,+r,lsof会一直执行,直到没有档案被显示,缺省是15s刷新) lsof -i tcp@ohaha.ks.edu.tw:ftp -n //lsof -n 不将IP转换为hostname,缺省是不加上-n参数 lsof -a 表示两个参数都必须满足时才显示结果 lsof -g gid 显示归属gid的进程情况 lsof +d /DIR/ 显示目录下被进程打开的文件 lsof +D /DIR/ 同上,但是会搜索目录下的所有目录,时间相对较长 lsof -d FD 显示指定文件描述符的进程 lsof -n 不将IP转换为hostname,缺省是不加上-n参数 lsof -i 用以显示符合条件的进程情况 lsof -i[46] [protocol][@hostname|hostaddr][:service|port] 46 --> IPv4 or IPv6 protocol --> TCP or UDP hostname --> Internet host name hostaddr --> IPv4地址 service --> /etc/service中的 service name (可以不只一个) port --> 端口号 (可以不只一个) lsof -p pid //查看进程pid打开的文件描述符,(一般情况下,一个进程可以打开的文件描述符的个数不超过1024) 防止文件描述符泄露,内存泄露不仅仅是堆内存泄露,还有句柄泄漏。 df -l 和du -sh 统计到的文件大小不同,可能是因为文件目录项被删除了,但是文件还被打开着,inode还被占用着。 查看所属root用户进程所打开的文件类型为txt的文件: # lsof -u root -a -d txt
###下面是在本地查看相关连接
[root@8A_4 ~]# lsof -i@192.168.1.78 COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME sshd 5939 root 3r IPv4 17600 0t0 TCP 172.16.1.16:ssh->192.168.1.78:mysql-cluster (ESTABLISHED) sshd 5941 lzb 3u IPv4 17600 0t0 TCP 172.16.1.16:ssh->192.168.1.78:mysql-cluster (ESTABLISHED) sshd 6161 root 3r IPv4 22946 0t0 TCP 172.16.1.16:ssh->192.168.1.78:commlinx-avl (ESTABLISHED) sshd 6163 lzb 3u IPv4 22946 0t0 TCP 172.16.1.16:ssh->192.168.1.78:commlinx-avl (ESTABLISHED) [root@8A_4 ~]# lsof -i@192.168.1.78 -a -ulzb COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME sshd 5941 lzb 3u IPv4 17600 0t0 TCP 172.16.1.16:ssh->192.168.1.78:mysql-cluster (ESTABLISHED) sshd 6163 lzb 3u IPv4 22946 0t0 TCP 172.16.1.16:ssh->192.168.1.78:commlinx-avl (ESTABLISHED) [root@8A_4 ~]# lsof -i@192.168.1.78 -i@192.168.1.82 -a -uroot COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME sshd 5939 root 3r IPv4 17600 0t0 TCP 172.16.1.16:ssh->192.168.1.78:mysql-cluster (ESTABLISHED) sshd 6161 root 3r IPv4 22946 0t0 TCP 172.16.1.16:ssh->192.168.1.78:commlinx-avl (ESTABLISHED) sshd 7367 root 3r IPv4 27271 0t0 TCP 172.16.1.16:ssh->192.168.1.82:bridgecontrol (ESTABLISHED)
###卸载文件系统
在卸载文件系统时,如果该文件系统中有任何打开的文件,操作通常将会失败。那么通过lsof可以找出那些进程在使用当前要卸载的文件系统,如下: [root@84-monitor monitor]# lsof /home/cc COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME bash 14848 root cwd DIR 0,21 4096 800765 /home/cc [root@84-monitor monitor]# umount /home/cc umount.nfs: /home/cc: device is busy umount.nfs: /home/cc: device is busy 最后知道是有进程停留在此目录,通过FD列的cwd可知,只要退出此层目录,便可以卸载此文件系统了。 # lsof /GTES11/ COMMAND PID USER FD TYPE DEVICE SIZE NODE NAME bash 4208 root cwd DIR 3,1 4096 2 /GTES11/ vim 4230 root cwd DIR 3,1 4096 2 /GTES11/ 在这个示例中,用户root正在其/GTES11目录中进行一些操作。一个 bash是实例正在运行,并且它当前的目录为/GTES11,另一个则显示的是vim正在编辑/GTES11下的文件。要成功地卸载/GTES11,应该在通知用户以确保情况正常之后,中止这些进程。 这个示例说明了应用程序的当前工作目录非常重要,因为它仍保持着文件资源,并且可以防止文件系统被卸载。这就是为什么大部分守护进程(后台进程)将它们的目录更改为根目录、或服务特定的目录(如 sendmail 示例中的 /var/spool/mqueue)的原因,以避免该守护进程阻止卸载不相关的文件系统。
###显示打开指定文件的所有进程
[root@250-shiyan ~]# lsof /lib64/libc-2.12.so COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME init 1 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so udevd 379 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so auditd 934 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so rsyslogd 950 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so rpcbind 973 rpc mem REG 253,0 1921216 260624 /lib64/libc-2.12.so rpc.statd 991 rpcuser mem REG 253,0 1921216 260624 /lib64/libc-2.12.so master 1120 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so qmgr 1129 postfix mem REG 253,0 1921216 260624 /lib64/libc-2.12.so crond 1130 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so mingetty 1143 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so mingetty 1145 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so mingetty 1147 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so mingetty 1149 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so mingetty 1151 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so mingetty 1153 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so udevd 1159 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so udevd 1160 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so sshd 12432 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so rpc.mount 14820 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so rpc.idmap 14858 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so pickup 19686 postfix mem REG 253,0 1921216 260624 /lib64/libc-2.12.so sshd 19757 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so bash 19759 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so sshd 19783 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so bash 19785 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so lsof 19811 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so lsof 19812 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so
一般来说,以pid或以命令名显示的打开文件数应该是一样的 [root@250-shiyan ~]# ps -ef|grep crond root 1130 1 0 Jan13 ? 00:00:16 crond [root@250-shiyan ~]# lsof -c crond|wc -l 20 [root@250-shiyan ~]# lsof -p 1130|wc -l 20
###以命令关键字查看打开文件数
[root@250-shiyan ~]# lsof -c crond COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME crond 1130 root cwd DIR 253,0 4096 2 / crond 1130 root rtd DIR 253,0 4096 2 / crond 1130 root txt REG 253,0 64096 396039 /usr/sbin/crond crond 1130 root mem REG 253,0 65928 260640 /lib64/libnss_files-2.12.so crond 1130 root mem REG 253,0 99158576 393113 /usr/lib/locale/locale-archive crond 1130 root mem REG 253,0 469528 260616 /lib64/libfreebl3.so crond 1130 root mem REG 253,0 40400 260628 /lib64/libcrypt-2.12.so crond 1130 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so crond 1130 root mem REG 253,0 113096 260680 /lib64/libaudit.so.1.0.0 crond 1130 root mem REG 253,0 19536 260630 /lib64/libdl-2.12.so crond 1130 root mem REG 253,0 55848 260793 /lib64/libpam.so.0.82.2 crond 1130 root mem REG 253,0 122040 260694 /lib64/libselinux.so.1 crond 1130 root mem REG 253,0 154520 260617 /lib64/ld-2.12.so crond 1130 root 0u CHR 1,3 0t0 3782 /dev/null crond 1130 root 1u CHR 1,3 0t0 3782 /dev/null crond 1130 root 2u CHR 1,3 0t0 3782 /dev/null crond 1130 root 3u REG 253,0 5 523959 /var/run/crond.pid crond 1130 root 4u unix 0xffff88001dbec3c0 0t0 8775 socket crond 1130 root 5r DIR 0,10 0 1 inotify
###以pid或者文件描述符查看打开文件数
[root@250-shiyan ~]# lsof -p 1130 COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME crond 1130 root cwd DIR 253,0 4096 2 / crond 1130 root rtd DIR 253,0 4096 2 / crond 1130 root txt REG 253,0 64096 396039 /usr/sbin/crond crond 1130 root mem REG 253,0 65928 260640 /lib64/libnss_files-2.12.so crond 1130 root mem REG 253,0 99158576 393113 /usr/lib/locale/locale-archive crond 1130 root mem REG 253,0 469528 260616 /lib64/libfreebl3.so crond 1130 root mem REG 253,0 40400 260628 /lib64/libcrypt-2.12.so crond 1130 root mem REG 253,0 1921216 260624 /lib64/libc-2.12.so crond 1130 root mem REG 253,0 113096 260680 /lib64/libaudit.so.1.0.0 crond 1130 root mem REG 253,0 19536 260630 /lib64/libdl-2.12.so crond 1130 root mem REG 253,0 55848 260793 /lib64/libpam.so.0.82.2 crond 1130 root mem REG 253,0 122040 260694 /lib64/libselinux.so.1 crond 1130 root mem REG 253,0 154520 260617 /lib64/ld-2.12.so crond 1130 root 0u CHR 1,3 0t0 3782 /dev/null crond 1130 root 1u CHR 1,3 0t0 3782 /dev/null crond 1130 root 2u CHR 1,3 0t0 3782 /dev/null crond 1130 root 3u REG 253,0 5 523959 /var/run/crond.pid crond 1130 root 4u unix 0xffff88001dbec3c0 0t0 8775 socket crond 1130 root 5r DIR 0,10 0 1 inotify[root@fileserv samba]# lsof -d 4COMMAND PID USER FD TYPE DEVICE SIZE NODE NAMEudevd 310 root 4u sock 0,5 980 can't identify protocolauditd 1039 root 4r 0000 0,11 0 2932 eventpollaudispd 1041 root 4w FIFO 0,6 2920 pipesyslogd 1061 root 4w REG 202,3 164744 1237905 /var/log/maillogportmap 1101 rpc 4u IPv4 3106 TCP *:sunrpc (LISTEN)rpc.statd 1132 root 4w FIFO 0,6 3137 pipedbus-daem 1167 dbus 4u CHR 1,3 964 /dev/nullpcscd 1205 root 4u unix 0xdd23c900 3350 sockethidd 1252 root 4u sock 0,5 3727 can't identify protocolautomount 1271 root 4r FIFO 0,6 3790 pipecupsd 1328 root 4u IPv4 3910 TCP localhost.localdomain:ipp (LISTEN)gpm 1347 root 4u CHR 13,63 1413 /dev/input/mice
###查看某个目录下被打开的文件数并且递归子目录
[root@221-comecs ~]# lsof +D /var/ COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME vmtoolsd 1191 root 4w REG 253,0 5 521803 /var/run/vmtoolsd.pid auditd 1279 root 5w REG 253,0 4969946 524922 /var/log/audit/audit.log rsyslogd 1295 root 1w REG 253,0 806 527133 /var/log/messages rsyslogd 1295 root 2w REG 253,0 41104 527080 /var/log/cron rsyslogd 1295 root 4w REG 253,0 3850519 527135 /var/log/secure rsyslogd 1295 root 5w REG 253,0 1214 527120 /var/log/maillog rpcbind 1318 rpc 3r REG 253,0 0 521841 /var/run/rpcbind.lock rpcbind 1318 rpc 5u unix 0xffff8800379713c0 0t0 9050 /var/run/rpcbind.sock rpc.statd 1336 rpcuser cwd DIR 253,0 4096 521898 /var/lib/nfs/statd rpc.statd 1336 rpcuser 6w REG 253,0 5 521845 /var/run/rpc.statd.pid master 1467 root cwd DIR 253,0 4096 521524 /var/spool/postfix master 1467 root 9uW REG 253,0 33 521942 /var/spool/postfix/pid/master.pid master 1467 root 10uW REG 253,0 33 521814 /var/lib/postfix/master.lock master 1467 root 17u FIFO 253,0 0t0 521816 /var/spool/postfix/public/pickup master 1467 root 23u FIFO 253,0 0t0 521818 /var/spool/postfix/public/qmgr qmgr 1475 postfix cwd DIR 253,0 4096 521524 /var/spool/postfix qmgr 1475 postfix 6u FIFO 253,0 0t0 521818 /var/spool/postfix/public/qmgr asterisk 2451 root 3u unix 0xffff88003dc6c6c0 0t0 15574164 /var/run/asterisk.ctl asterisk 2451 root 4w REG 253,0 16550 521941 /var/log/asterisk/messages asterisk 2451 root 5w REG 253,0 0 521943 /var/log/asterisk/event_log asterisk 2451 root 6w REG 253,0 2154 524874 /var/log/asterisk/queue_log asterisk 2451 root 7u REG 253,0 0 524865 /var/lib/asterisk/astdb crond 25396 root 3u REG 253,0 6 524871 /var/run/crond.pid pickup 26803 postfix cwd DIR 253,0 4096 521524 /var/spool/postfix pickup 26803 postfix 6u FIFO 253,0 0t0 521816 /var/spool/postfix/public/pickup
###查看某个目录下被打开的文件数,是+d选项
[root@221-comecs ~]# lsof +d /var/log COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME rsyslogd 1295 root 1w REG 253,0 806 527133 /var/log/messages rsyslogd 1295 root 2w REG 253,0 41104 527080 /var/log/cron rsyslogd 1295 root 4w REG 253,0 3850519 527135 /var/log/secure rsyslogd 1295 root 5w REG 253,0 1214 527120 /var/log/maillog [root@221-comecs ~]# lsof +d /var/log/asterisk/ COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME asterisk 2451 root 4w REG 253,0 16550 521941 /var/log/asterisk/messages asterisk 2451 root 5w REG 253,0 0 521943 /var/log/asterisk/event_log asterisk 2451 root 6w REG 253,0 2154 524874 /var/log/asterisk/queue_log
###过程分析
对待每一个守护进程都是这个过程。一。先查看系统中都有哪些进程在运行[root@84-monitor logs]# pstreeinit─┬─auditd───{auditd} ├─crond───4*[crond─┬─sendmail───postdrop] │ └─sh───sh───sh───sh───mail───mail] ├─httpd───8*[httpd] ├─java───23*[{java}] ├─master─┬─cleanup │ ├─local │ ├─pickup │ └─qmgr ├─6*[mingetty] ├─mysqld_safe───mysqld───9*[{mysqld}] ├─rpc.statd ├─rpcbind ├─rsyslogd───3*[{rsyslogd}] ├─sshd─┬─sshd───bash───pstree │ └─3*[sshd───bash───bash───ssh] └─udevd───2*[udevd] 二。其次列出以rsys开头的进程打开的所有文件 [root@84-monitor 972]# lsof -c rsys COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME rsyslogd 972 root cwd DIR 253,0 4096 2 / rsyslogd 972 root rtd DIR 253,0 4096 2 / rsyslogd 972 root txt REG 253,0 396064 521732 /sbin/rsyslogd rsyslogd 972 root mem REG 253,0 27232 521711 /lib64/rsyslog/imklog.so rsyslogd 972 root mem REG 253,0 340568 521717 /lib64/rsyslog/imuxsock.so rsyslogd 972 root mem REG 253,0 110960 521867 /lib64/libresolv-2.12.so rsyslogd 972 root mem REG 253,0 27424 521245 /lib64/libnss_dns-2.12.so rsyslogd 972 root mem REG 253,0 65928 521865 /lib64/libnss_files-2.12.so rsyslogd 972 root mem REG 253,0 26984 521718 /lib64/rsyslog/lmnet.so rsyslogd 972 root mem REG 253,0 1921176 521231 /lib64/libc-2.12.so rsyslogd 972 root mem REG 253,0 90880 521844 /lib64/libgcc_s-4.4.7-20120601.so.1 rsyslogd 972 root mem REG 253,0 43880 521868 /lib64/librt-2.12.so rsyslogd 972 root mem REG 253,0 19536 521861 /lib64/libdl-2.12.so rsyslogd 972 root mem REG 253,0 142640 521255 /lib64/libpthread-2.12.so rsyslogd 972 root mem REG 253,0 88600 521285 /lib64/libz.so.1.2.3 rsyslogd 972 root mem REG 253,0 154624 521489 /lib64/ld-2.12.so rsyslogd 972 root 0u unix 0xffff88001fbd06c0 0t0 10252 /dev/log rsyslogd 972 root 1w REG 253,0 292 786284 /var/log/messages rsyslogd 972 root 2w REG 253,0 1191255 785232 /var/log/cron rsyslogd 972 root 3r REG 0,3 0 4026532040 /proc/kmsg rsyslogd 972 root 4w REG 253,0 564219 785245 /var/log/maillog rsyslogd 972 root 5w REG 253,0 1004 786285 /var/log/secure 三。随后进入到972的fd目录,列出文件列表,打开了5个文件 [root@84-monitor 972]# cd /proc/972/fd [root@84-monitor fd]# ll total 0 lrwx------. 1 root root 64 Mar 18 09:39 0 -> socket:[10252] l-wx------. 1 root root 64 Mar 18 09:39 1 -> /var/log/messages l-wx------. 1 root root 64 Mar 18 09:39 2 -> /var/log/cron lr-x------. 1 root root 64 Mar 18 09:39 3 -> /proc/kmsg l-wx------. 1 root root 64 Mar 18 09:39 4 -> /var/log/maillog l-wx------. 1 root root 64 Mar 18 09:39 5 -> /var/log/secure 四。查漏补缺 FD列 txt program text (code and data); rtd root directory; cwd current working directory; cwd,rtd这两个经常是一样的,因为如果没有具体的目录的话,默认全放到根下。 mem memory-mapped file; u for read and write access; TYPE列 unix for a UNIX domain socket; REG for a regular file; DIR for a directory; 一。 [root@84-monitor fd]# lsof -c rpcbind COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME rpcbind 32580 rpc cwd DIR 253,0 4096 2 / rpcbind 32580 rpc rtd DIR 253,0 4096 2 / rpcbind 32580 rpc txt REG 253,0 54408 521226 /sbin/rpcbind rpcbind 32580 rpc mem REG 253,0 65928 521865 /lib64/libnss_files-2.12.so rpcbind 32580 rpc mem REG 253,0 1921176 521231 /lib64/libc-2.12.so rpcbind 32580 rpc mem REG 253,0 142640 521255 /lib64/libpthread-2.12.so rpcbind 32580 rpc mem REG 253,0 19536 521861 /lib64/libdl-2.12.so rpcbind 32580 rpc mem REG 253,0 36584 521220 /lib64/libgssglue.so.1.0.0 rpcbind 32580 rpc mem REG 253,0 113432 521863 /lib64/libnsl-2.12.so rpcbind 32580 rpc mem REG 253,0 162016 521225 /lib64/libtirpc.so.1.0.10 rpcbind 32580 rpc mem REG 253,0 40792 521329 /lib64/libwrap.so.0.7.6 rpcbind 32580 rpc mem REG 253,0 154624 521489 /lib64/ld-2.12.so rpcbind 32580 rpc 0u CHR 1,3 0t0 3782 /dev/null rpcbind 32580 rpc 1u CHR 1,3 0t0 3782 /dev/null rpcbind 32580 rpc 2u CHR 1,3 0t0 3782 /dev/null rpcbind 32580 rpc 3r REG 253,0 0 786245 /var/run/rpcbind.lock rpcbind 32580 rpc 4u sock 0,6 0t0 3617563 can't identify protocol rpcbind 32580 rpc 5u unix 0xffff88001dfc3080 0t0 3617538 /var/run/rpcbind.sock rpcbind 32580 rpc 6u IPv4 3617540 0t0 UDP *:sunrpc rpcbind 32580 rpc 7u IPv4 3617542 0t0 UDP *:955 rpcbind 32580 rpc 8u IPv4 3617543 0t0 TCP *:sunrpc (LISTEN) rpcbind 32580 rpc 9u IPv6 3617545 0t0 UDP *:sunrpc rpcbind 32580 rpc 10u IPv6 3617547 0t0 UDP *:955 rpcbind 32580 rpc 11u IPv6 3617548 0t0 TCP *:sunrpc (LISTEN) 二。查漏补缺 TYPE列 sock for a socket of unknown domain; IPv4 for an IPv4 socket; IPv6 for an open IPv6 network file - even if its address is IPv4, mapped in an IPv6 address;
案例
恢复删除的文件
当Linux计算机受到入侵时,常见的情况是日志文件被删除,以掩盖攻击者的踪迹。管理错误也可能导致意外删除重要的文件,比如在清理旧日志时,意外地删除了数据库的活动事务日志。有时可以通过lsof来恢复这些文件。
当进程打开了某个文件时,只要该进程保持打开该文件,即使将其删除,它依然存在于磁盘中。这意味着,进程并不知道文件已经被删除,它仍然可以向打开该文件时提供给它的文件描述符进行读取和写入。除了该进程之外,这个文件是不可见的,因为已经删除了其相应的目录索引节点。
在/proc
目录下,其中包含了反映内核和进程树的各种文件。/proc目录挂载的是在内存中所映射的一块区域,所以这些文件和目录并不存在于磁盘中,因此当我们对这
些文件进行读取和写入时,实际上是在从内存中获取相关信息。大多数与 lsof 相关的信息都存储于以进程的 PID 命名的目录中,即
/proc/1234 中包含的是 PID 为 1234
的进程的信息。每个进程目录中存在着各种文件,它们可以使得应用程序简单地了解进程的内存空间、文件描述符列表、指向磁盘上的文件的符号链接和其他系统信
息。lsof 程序使用该信息和其他关于内核内部状态的信息来产生其输出。所以lsof
可以显示进程的文件描述符和相关的文件名等信息。也就是我们通过访问进程的文件描述符可以找到该文件的相关信息。
当系统中的某个文件被意外地删除
了,只要这个时候系统中还有进程正在访问该文件,那么我们就可以通过lsof从/proc目录下恢复该文件的内容。
假如由于误操作将/var/log/messages文件删除掉了,那么这时要将/var/log/messages文件恢复的方法如下:
首先使用lsof来查看当前是否有进程打开/var/logmessages文件,如下:
# lsof |grep /var/log/messages
syslogd 1283 root 2w REG 3,3 5381017 1773647 /var/log/messages (deleted)
从
上面的信息可以看到 PID 1283(syslogd)打开文件的文件描述符为
2。同时还可以看到/var/log/messages已经标记被删除了。因此我们可以在 /proc/1283/fd/2
(fd下的每个以数字命名的文件表示进程对应的文件描述符)中查看相应的信息,如下:
# head -n 10 /proc/1283/fd/2
Aug 4 13:50:15 holmes86 syslogd 1.4.1: restart.
Aug 4 13:50:15 holmes86 kernel: klogd 1.4.1, log source = /proc/kmsg started.
Aug
4 13:50:15 holmes86 kernel: Linux version 2.6.22.1-8
(root@everestbuilder.linux-ren.org) (gcc version 4.2.0) #1 SMP Wed Jul
18 11:18:32 EDT 2007 Aug 4 13:50:15 holmes86 kernel: BIOS-provided
physical RAM map: Aug 4 13:50:15 holmes86 kernel: BIOS-e820:
0000000000000000 - 000000000009f000 (usable) Aug 4 13:50:15 holmes86
kernel: BIOS-e820: 000000000009f000 - 00000000000a0000 (reserved) Aug 4
13:50:15 holmes86 kernel: BIOS-e820: 0000000000100000 - 000000001f7d3800
(usable) Aug 4 13:50:15 holmes86 kernel: BIOS-e820: 000000001f7d3800 -
0000000020000000 (reserved) Aug 4 13:50:15 holmes86 kernel: BIOS-e820:
00000000e0000000 - 00000000f0007000 (reserved) Aug 4 13:50:15 holmes86
kernel: BIOS-e820: 00000000f0008000 - 00000000f000c000 (reserved)
从上面的信息可以看出,查看 /proc/8663/fd/15 就可以得到所要恢复的数据。如果可以通过文件描述符查看相应的数据,那么就可以使用 I/O 重定向将其复制到文件中,如:
cat /proc/1283/fd/2 > /var/log/messages
对于许多应用程序,尤其是日志文件和数据库,这种恢复删除文件的方法非常有用。
lsof -a 表示两个参数都必须满足时才显示结果