Linux日志分析的实战专题.docx
《Linux日志分析的实战专题.docx》由会员分享,可在线阅读,更多相关《Linux日志分析的实战专题.docx(15页珍藏版)》请在冰点文库上搜索。
Linux日志分析的实战专题
Linux日志分析的实战专题
日志也是用户应该注意的地方之一。
不要低估日志文件对网络安全的重要作用,因为日志文件能够详细记录系统每天发生的各种各样的事件。
用户可以通过日志文件检查错误产生的原因,或者在受到攻击和黑客入侵时追踪攻击者的踪迹。
日志的两个比较重要的作用是:
审核和监测。
配置好的Linux的日志非常强大。
对于Linux系统而言,所有的日志文件都在/var/log下。
默认情况下,Linux的日志文件已经足够强大,但没有记录FTP的活动。
用户可以通过修改/etc/ftpacess让系统记录FTP的一切活动。
##################################################################################
Linux日志系统简介
:
日志对于系统的安全来说非常重要,它记录了系统每天发生的各种各样的事情,用户可以通过它来检查错误发生的原因,或者寻找受到攻击时攻击者留下的痕迹。
日志主要的功能是审计和监测。
它还可以实时地监测系统状态,监测和追踪侵入者。
Linux系统一般有3个主要的日志子系统:
连接时间日志、进程统计日志和错误日志。
—————————————————————————————————————————
日志也是用户应该注意的地方之一。
不要低估日志文件对网络安全的重要作用,因为日志文件能够详细记录系统每天发生的各种各样的事件。
用户可以通过日志文件检查错误产生的原因,或者在受到攻击和黑客入侵时追踪攻击者的踪迹。
日志的两个比较重要的作用是:
审核和监测。
配置好的Linux的日志非常强大。
对于Linux系统而言,所有的日志文件都在/var/log下。
默认情况下,Linux的日志文件已经足够强大,但没有记录FTP的活动。
用户可以通过修改/etc/ftpacess让系统记录FTP的一切活动。
Linux日志系统
日志对于系统的安全来说非常重要,它记录了系统每天发生的各种各样的事情,用户可以通过它来检查错误发生的原因,或者寻找受到攻击时攻击者留下的痕迹。
日志主要的功能是审计和监测。
它还可以实时地监测系统状态,监测和追踪侵入者。
Linux系统一般有3个主要的日志子系统:
连接时间日志、进程统计日志和错误日志。
连接时间日志
连接时间日志由多个程序执行,把记录写入到/var/og/wtmp和/var/run/utmp。
ogin等程序更新wtmp和utmp文件,使系统管理员能够跟踪谁在何时登录到系统。
进程统计日志
进程统计日志由系统内核执行。
当一个进程终止时,为每个进程往进程统计文件(pacct或acct)中写一个记录。
进程统计的目的是为系统中的基本服务提供命令使用统计。
错误日志
错误日志由sysogd(8)执行。
各种系统守护进程、用户程序和内核通过sysog(3)向文件/var/og/messages报告值得注意的事件。
另外还有许多UNIX类程序创建日志,像HTTP和FTP这样提供网络服务的服务器也有详细的日志。
#######################################################################
RedHatLinux常见的日志文件和常用命令
:
成功地管理任何系统的关键之一,是要知道系统中正在发生什么事。
Linux中提供了异常日志,并且日志的细节是可配置的。
Linux日志都以明文形式存储,所以用户不需要特殊的工具就可以搜索和阅读它们。
还可以编写脚本,来扫描这些日志,并基于它们的内容去自动执行某些功能。
Linux日志存储在/var/log目录中。
这里有几个由系统维护的日志文件,但其他服务和程序也可能会把它们的日志放在这里。
大多数日志只有root账户才可以读,不过修改文件的访问权限就可以让其他人可读。
—————————————————————————————————————————
成功地管理任何系统的关键之一,是要知道系统中正在发生什么事。
Linux中提供了异常日志,并且日志的细节是可配置的。
Linux日志都以明文形式存储,所以用户不需要特殊的工具就可以搜索和阅读它们。
还可以编写脚本,来扫描这些日志,并基于它们的内容去自动执行某些功能。
Linux日志存储在/var/log目录中。
这里有几个由系统维护的日志文件,但其他服务和程序也可能会把它们的日志放在这里。
大多数日志只有root账户才可以读,不过修改文件的访问权限就可以让其他人可读。
RedHatLinux常用的日志文件
RedHatLinux常见的日志文件详述如下
/var/log/boot.log
该文件记录了系统在引导过程中发生的事件,就是Linux系统开机自检过程显示的信息。
/var/log/cron
该日志文件记录crontab守护进程crond所派生的子进程的动作,前面加上用户、登录时间和PID,以及派生出的进程的动作。
CMD的一个动作是cron派生出一个调度进程的常见情况。
REPLACE(替换)动作记录用户对它的cron文件的更新,该文件列出了要周期性执行的任务调度。
RELOAD动作在REPLACE动作后不久发生,这意味着cron注意到一个用户的cron文件被更新而cron需要把它重新装入内存。
该文件可能会查到一些反常的情况。
/var/log/maillog
该日志文件记录了每一个发送到系统或从系统发出的电子邮件的活动。
它可以用来查看用户使用哪个系统发送工具或把数据发送到哪个系统。
下面是该日志文件的片段:
Sep417:
23:
52UNIXsendmail[1950]:
g849Npp01950:
from=root,size=25,
class=0,nrcpts=1,
msgid=,
relay=root@localhost
Sep417:
23:
55UNIXsendmail[1950]:
g849Npp01950:
to=lzy@,
ctladdr=root(0/0),delay=00:
00:
04,xdelay=00:
00:
03,mailer=esmtp,pri=30025,
relay=.[10.152.8.2],dsn=2.0.0,stat=Sent(Messagequeued)
/var/log/messages
该日志文件是许多进程日志文件的汇总,从该文件可以看出任何入侵企图或成功的入侵。
如以下几行:
Sep308:
30:
17UNIXlogin[1275]:
FAILEDLOGIN2FROM(null)FORsuying,
Authenticationfailure
Sep417:
40:
28UNIX--suying[2017]:
LOGINONpts/1BYsuyingFROM
Sep417:
40:
39UNIXsu(pam_unix)[2048]:
sessionopenedforuserrootbysuying(uid=999)
该文件的格式是每一行包含日期、主机名、程序名,后面是包含PID或内核标识的方括号、一个冒号和一个空格,最后是消息。
该文件有一个不足,就是被记录的入侵企图和成功的入侵事件,被淹没在大量的正常进程的记录中。
但该文件可以由/etc/syslog文件进行定制。
由/etc/syslog.conf配置文件决定系统如何写入/var/messages。
有关如何配置/etc/syslog.conf文件决定系统日志记录的行为,将在后面详细叙述。
/var/log/syslog
默认RedHatLinux不生成该日志文件,但可以配置/etc/syslog.conf让系统生成该日志文件。
它和/etc/log/messages日志文件不同,它只记录警告信息,常常是系统出问题的信息,所以更应该关注该文件。
要让系统生成该日志文件,在/etc/syslog.conf文件中加上:
*.warning/var/log/syslog 该日志文件能记录当用户登录时login记录下的错误口令、Sendmail的问题、su命令执行失败等信息。
下面是一条记录:
Sep616:
47:
52UNIXlogin(pam_unix)[2384]:
checkpass;userunknown
/var/log/secure
该日志文件记录与安全相关的信息。
该日志文件的部分内容如下:
Sep416:
05:
09UNIXxinetd[711]:
START:
ftppid=1815from=127.0.0.1
Sep416:
05:
09UNIXxinetd[1815]:
USERID:
ftpOTHER:
root
Sep416:
07:
24UNIXxinetd[711]:
EXIT:
ftppid=1815duration=135(sec)
Sep416:
10:
05UNIXxinetd[711]:
START:
ftppid=1846from=127.0.0.1
Sep416:
10:
05UNIXxinetd[1846]:
USERID:
ftpOTHER:
root
Sep416:
16:
26UNIXxinetd[711]:
EXIT:
ftppid=1846duration=381(sec)
Sep417:
40:
20UNIXxinetd[711]:
START:
telnetpid=2016from=10.152.8.2
/var/log/lastlog
该日志文件记录最近成功登录的事件和最后一次不成功的登录事件,由login生成。
在每次用户登录时被查询,该文件是二进制文件,需要使用lastlog命令查看,根据UID排序显示登录名、端口号和上次登录时间。
如果某用户从来没有登录过,就显示为"**Neverloggedin**"。
该命令只能以root权限执行。
简单地输入lastlog命令后就会看到类似如下的信息:
UsernamePortFromLatest
roottty2TueSep308:
32:
27+08002002
bin**Neverloggedin**
daemon**Neverloggedin**
adm**Neverloggedin**
lp**Neverloggedin**
sync**Neverloggedin**
shutdown**Neverloggedin**
halt**Neverloggedin**
mail**Neverloggedin**
news**Neverloggedin**
uucp**Neverloggedin**
operator**Neverloggedin**
games**Neverloggedin**
gopher**Neverloggedin**
ftpftpUNIXTueSep314:
49:
04+08002002
nobody**Neverloggedin**
nscd**Neverloggedin**
mailnull**Neverloggedin**
ident**Neverloggedin**
rpc**Neverloggedin**
rpcuser**Neverloggedin**
xfs**Neverloggedin**
gdm**Neverloggedin**
postgres**Neverloggedin**
apache**Neverloggedin**
lzytty2MonJul1508:
50:
37+08002002
suyingtty2TueSep308:
31:
17+08002002
系统账户诸如bin、daemon、adm、uucp、mail等决不应该登录,如果发现这些账户已经登录,就说明系统可能已经被入侵了。
若发现记录的时间不是用户上次登录的时间,则说明该用户的账户已经泄密了。
/var/log/wtmp
该日志文件永久记录每个用户登录、注销及系统的启动、停机的事件。
因此随着系统正常运行时间的增加,该文件的大小也会越来越大,增加的速度取决于系统用户登录的次数。
该日志文件可以用来查看用户的登录记录,last命令就通过访问这个文件获得这些信息,并以反序从后向前显示用户的登录记录,last也能根据用户、终端tty或时间显示相应的记录。
命令last有两个可选参数:
last-u用户名显示用户上次登录的情况。
last-t天数显示指定天数之前的用户登录情况。
/var/run/utmp
该日志文件记录有关当前登录的每个用户的信息。
因此这个文件会随着用户登录和注销系统而不断变化,它只保留当时联机的用户记录,不会为用户保留永久的记录。
系统中需要查询当前用户状态的程序,如who、w、users、finger等就需要访问这个文件。
该日志文件并不能包括所有精确的信息,因为某些突发错误会终止用户登录会话,而系统没有及时更新utmp记录,因此该日志文件的记录不是百分之百值得信赖的。
以上提及的3个文件(/var/log/wtmp、/var/run/utmp、/var/log/lastlog)是日志子系统的关键文件,都记录了用户登录的情况。
这些文件的所有记录都包含了时间戳。
这些文件是按二进制保存的,故不能用less、cat之类的命令直接查看这些文件,而是需要使用相关命令通过这些文件而查看。
其中,utmp和wtmp文件的数据结构是一样的,而lastlog文件则使用另外的数据结构,关于它们的具体的数据结构可以使用man命令查询。
每次有一个用户登录时,login程序在文件lastlog中查看用户的UID。
如果存在,则把用户上次登录、注销时间和主机名写到标准输出中,然后login程序在lastlog中记录新的登录时间,打开utmp文件并插入用户的utmp记录。
该记录一直用到用户登录退出时删除。
utmp文件被各种命令使用,包括who、w、users和finger。
下一步,login程序打开文件wtmp附加用户的utmp记录。
当用户登录退出时,具有更新时间戳的同一utmp记录附加到文件中。
wtmp文件被程序last使用。
/var/log/xferlog
该日志文件记录FTP会话,可以显示出用户向FTP服务器或从服务器拷贝了什么文件。
该文件会显示用户拷贝到服务器上的用来入侵服务器的恶意程序,以及该用户拷贝了哪些文件供他使用。
该文件的格式为:
第一个域是日期和时间,第二个域是下载文件所花费的秒数、远程系统名称、文件大小、本地路径名、传输类型(a:
ASCII,b:
二进制)、与压缩相关的标志或tar,或"_"(如果没有压缩的话)、传输方向(相对于服务器而言:
i代表进,o代表出)、访问模式(a:
匿名,g:
输入口令,r:
真实用户)、用户名、服务名(通常是ftp)、认证方法(l:
RFC931,或0),认证用户的ID或"*"。
下面是该文件的一条记录:
WedSep408:
14:
0320021UNIX275531
/var/ftp/lib/libnss_files-2.2.2.sob_oa-root@UNIXftp0*c
/var/log/kernlog
RedHatLinux默认没有记录该日志文件。
要启用该日志文件,必须在/etc/syslog.conf文件中添加一行:
kern.*/var/log/kernlog。
这样就启用了向/var/log/kernlog文件中记录所有内核消息的功能。
该文件记录了系统启动时加载设备或使用设备的情况。
一般是正常的操作,但如果记录了没有授权的用户进行的这些操作,就要注意,因为有可能这就是恶意用户的行为。
下面是该文件的部分内容:
Sep509:
38:
42UNIXkernel:
NET4:
LinuxTCP/IP1.0forNET4.0
Sep509:
38:
42UNIXkernel:
IPProtocols:
ICMP,UDP,TCP,IGMP
Sep509:
38:
42UNIXkernel:
IP:
routingcachehashtableof512buckets,4Kbytes
Sep509:
38:
43UNIXkernel:
TCP:
Hashtablesconfigured(established4096bind4096)
Sep509:
38:
43UNIXkernel:
LinuxIPmulticastrouter0.06plusPIM-SM
Sep509:
38:
43UNIXkernel:
NET4:
Unixdomainsockets1.0/SMPforLinuxNET4.0.
Sep509:
38:
44UNIXkernel:
EXT2-fswarning:
checktimereached,runninge2fsckisrecommended
Sep509:
38:
44UNIXkernel:
VFS:
Mountedroot(ext2filesystem).
Sep509:
38:
44UNIXkernel:
SCSIsubsystemdriverRevision:
1.00
/var/log/Xfree86.x.log
该日志文件记录了X-Window启动的情况。
另外,除了/var/log/外,恶意用户也可能在别的地方留下痕迹,应该注意以下几个地方:
root和其他账户的shell历史文件;用户的各种邮箱,如.sent、mbox,以及存放在/var/spool/mail/和/var/spool/mqueue中的邮箱;临时文件/tmp、/usr/tmp、/var/tmp;隐藏的目录;其他恶意用户创建的文件,通常是以"."开头的具有隐藏属性的文件等。
具体命令
wtmp和utmp文件都是二进制文件,它们不能被诸如tail之类的命令剪贴或合并(使用cat命令)。
用户需要使用who、w、users、last和ac等命令来使用这两个文件包含的信息。
who命令
who命令查询utmp文件并报告当前登录的每个用户。
who的默认输出包括用户名、终端类型、登录日期及远程主机。
例如,键入who命令,然后按回车键,将显示如下内容:
chyangpts/0Aug1815:
06
ynguopts/2Aug1815:
32
ynguopts/3Aug1813:
55
lewispts/4Aug1813:
35
ynguopts/7Aug1814:
12
yloupts/8Aug1814:
15
如果指明了wtmp文件名,则who命令查询所有以前的记录。
命令who/var/log/wtmp将报告自从wtmp文件创建或删改以来的每一次登录。
w命令
w命令查询utmp文件并显示当前系统中每个用户和它所运行的进程信息。
例如,键入w命令,然后按回车键,将显示如下内容:
3:
36pmup1day,22:
34,6users,loadaverage:
0.23,0.29,0.27
USERTTYFROMLOGIN@IDLEJCPUPCPUWHAT
chyangpts/0202.38.68.2423:
06pm2:
040.08s0.04s-bash
ynguopts/2202.38.79.473:
32pm0.00s0.14s0.05w
lewispts/3202.38.64.2331:
55pm30:
390.27s0.22s-bash
lewispts/4202.38.64.2331:
35pm6.00s4.03s0.01ssh/home/users/
ynguopts/7simba.nic.ustc.e2:
12pm0.00s0.47s0.24stelnetmail
yloupts/8202.38.64.2352:
15pm1:
09m0.10s0.04s-bash
users命令
users命令用单独的一行打印出当前登录的用户,每个显示的用户名对应一个登录会话。
如果一个用户有不止一个登录会话,那他的用户名将显示相同的次数。
例如,键入users命令,然后按回车键,将显示如下内容:
chyanglewislewisylouynguoynguo
last命令
last命令往回搜索wtmp来显示自从文件第一次创建以来登录过的用户。
例如:
chyangpts/9202.38.68.242TueAug108:
34-11:
23(02:
49)
cfanpts/6202.38.64.224TueAug108:
33-08:
48(00:
14)
chyangpts/4202.38.68.242TueAug108:
32-12:
13(03:
40)
lewispts/3202.38.64.233TueAug108:
06-11:
09(03:
03)
lewispts/2202.38.64.233TueAug107:
56-11:
09(03:
12)
如果指明了用户,那么last只报告该用户的近期活动,例如,键入lastynguo命令,然后按回车键,将显示如下内容:
ynguopts/4simba.nic.ustc.eFriAug416:
50-08:
20(15:
30)
ynguopts/4simba.nic.ustc.eThuAug323:
55-04:
40(04:
44)
ynguopts/11simba.nic.ustc.eThuAug320:
45-22:
02(01:
16)
ynguopts/0simba.nic.ustc.eThuAug303:
17-05:
42(02:
25)
ynguopts/0simba.nic.ustc.eWedAug201:
04-03:
161+02:
12)
ynguopts/0simba.nic.ustc.eWedAug200:
43-00:
54(00:
11)
ynguopts/9simba.nic.ustc.eThuAug120:
30-21:
26(00:
55)
ac命令
ac命令根据当前的/var/log/wtmp文件中的登录进入和退出来报告用户连接的时间(小时),如果不使用标志,则报告总的时间。
例如,键入ac命令,然后按回车键,将显示如下内容:
total5177.47
键入ac-d命令,然后按回车键,将显示