局域网网络流量监控_LINUX常见性能监控工具总结

  • Post author:
  • Post category:linux


概述

很多朋友私信问关于linux有哪些性能监控工具,所以整理了这方面内容,下面分享下给大家。

工具功能概览

整理了一个关于监控工具及其功能的表。下面对这些工具单独详细介绍。

469218183f21bf46507b1657fa6bb423.png

Linux性能监控工具

top

top命令会展示进程的实际活动。默认情况下,它会列出系统上所有cpu密集型任务,并且每5秒钟刷新一次列表。可以对PID(数值),生存时间(最新的排最前面),时间(累计时

间)以及常驻内存使用率和时间(进程启动开始占用cpu的时间)进行排序。

26ffbe88c0ce82775e74b80274291ddd.png

输出中的各列:

PID 进程号USER 进程所有者的名字。PRI 进程优先级NI nice级别SIZE 进程使用的内存(代码、数据和栈),kb单位RSS 物理RAM使用量,kb单位SHARE 和其它进程共享的内存,kb单位STAT 进程状态:S=睡眠,R=运行,T=停止或跟踪,D=不可中断的睡眠,Z=僵尸。%CPU CPU使用量。%MEM 物理内存用量TIME 进程使用的总CPU时间(从启动开始算)COMMAND 进程的命令行启动命令(包括参数)

vmstat

vmstat显示关于进程,内存,页,块I/O,traps和CPU的信息。vmstat既可以展示平均值,也

可以是实时数据。通过提供采样频率和采样时间就可以开启vmstat的采样模式。

5e51347566b354f2171b434a4afe5b90.png


各列的含义如下:

进程

r:等待执行时间的进程数b:在不可中断睡眠中的进程数

内存

swpd:已使用的虚拟内存量free:空闲内存量buff:作为缓冲的内存cache:作缓存的内存

Swap

si:从交换分区写到内存的量so:从内存写到交换分区的大小

IO

bi:发往块设备的数目(blocks/s)bo:从块设备接收的块数目 (blocks/s)

System

in:每秒钟的中断次数,包括时钟cs:每秒的上下文切换次数

CPU(总CPU时间的百分比):

us:运行非内核代码的时间(用户时间,包括nice时间)sy:运行内核代码的时间(系统时间)id:空闲时间,早先的Linux2.5.41版本,包含了I/O等待时间wa:等待IO的时间,早先的Linux2.5.41版本,这个值为0

uptime

uptime 命令可以用来查看服务器运行了多长时间,有多少用户登录在服务器上,以及服务器的平均负载。分别展示过去1分钟、5分钟和15分钟的系统瓶颈负载值。

平均负载最理想的值是1,意味着每个进程可以直接使用CPU,没有发生CPU周期丢失。不同系统的负载有很大差别。对单处理器工作站来说,1或2的负载值是勉强可以接受的,而在多

处理器服务器上,平均负载为8或者10的时候,系统依旧运行良好。

使用uptime或许可以找出服务器或网络的问题。例如,当网络服务运行不佳时,你就可以用uptime命令查看系统负载情况。如果负载不高,问题可能出现在你的网络中,而不是服务器系统上。

417306a55486ebbff79300bff7350f98.png

ps 和 pstree

在系统分析中,ps和pstree是最基础的命令,ps有三种不同的命令选项,UNIX、BSD和GNU

风格。

ps命令展示所有进程列表。top命令展示了进程活动,而且ps显示的信息更加详细。ps所显示

出来的进程数量取决于所使用的命令参数。简单的ps -A命令会列出所有的进程和他们各自的

PID,我们可以使用PID做更多的事情。在使用pmap,renice等工具的时候,就需要用到

PID。

在运行java应用的服务器上,使用ps -A命令可能一下子就把显示器全部占满了,很难清楚查

看运行进程的完整列表。在这个情况下,pstree命令可能就会派上用场,它把运行进程以树形

结构展示,把子进程合并展示(例如java线程)。

b7c681d7feae3517737a405784c2ca43.png

其它的命令选项:

-e 所有进程,和-A一样-l 显示长格式-F 额外的全格式,包括参数和选项。-H 显示进程等级-L 显示线程,可能带有LWP和NLWP列-m 在进程后面显示线程

使用如下命令可以看到详细的进程信息:

ps -elFL

b57b891f39cc77e1a92b7a1c2190d09e.png

输出的字段含义:

F 进程标志S 进程状态:S=睡眠,R=运行,T=停止或跟踪, D=不可中断的睡眠,Z=僵尸。UID 拥有进程的用户名字。PID 进程IDPPID 父进程IDLWP LWP号(light weight process,or thread,轻量级进程,或线程)。c 处理器使用的百分比。NLWP 进程中的lwps(线程)个数。PRI 进程优先级NI nice级别(进程是否通过nice改变优先级,见下文)ADDR 进程地址空间(例子中没展示)SZ 进程使用的内存大小(代码+数据+栈) ,单位kb。WCHAN 睡眠进程的内核函数名字,如果进程在运行,显示“-”,如果显示为“*”,则表示是多线程。RSS 驻留内存大小,任务所使用的非swap物理内存大小,单位是kb。PSR 分配给进程的处理器个数。STIME 命令开始时间TTY 终端TIME 进程从启动开始,使用CPU的总时间CMD 开启任务的命令(包含参数)

free

free命令显示了系统所有已用和可用内存(包括swap)量。也包括被内核使用的缓冲和缓存

信息。

使用free命令的时候,记住Linux内存架构和虚拟内存管理器的工作方式。空闲内存是受限使

用的,使用swap也不表示出现了内存瓶颈。

下图展示了free命令的基本原理。

28f36b99a00dbb13e5af32b5fdc9f401.png

free命令基本原理

free命令的常用参数:

-b,-k,-m,-g 以字节b,千字节kb,兆字节mb和吉字节gb为单位展示。

-l 显示详细的高低内存统计

-c 输出free的次数

Memory used in a zone

832e8e9f32ff40e2cd1527cd901a541c.png

iostat

iostat命令显示从系统启动依赖的平均CPU时间(和uptime类似)。它会生成服务器磁盘子系

统的活动报告:CPU和磁盘设备利用情况。使用iostat找出详细的I/O瓶颈,进行性能优化,详

见“找到磁盘瓶颈”一节内容。iostat是sysstat包里的一个组件。


CPU使用报告有4个部分:

%user 显示CPU在用户级执行应用程序所花时间的百分比。

%nice 显示带有nice优先级的用户级程序占用的CPU时间百分比(详见“nice,renice一

节”)。

%sys 显示显示执行系统级(内核)任务所占用CPU时间的百分比。

%idle 显示CPU空闲的时间百分比。


设备使用报告包括如下部分:

Device 块设备的名字

tps 设备上的每秒传输次数(每秒的I/O请求数)。多个单I/O请求可以合成一个传输请

求,因为每个传输请求的大小可以是不一样的。

Blk_read/s,Blk_wrtn/s 每秒块读写显示了每秒从设备读或者写的数据。块也可以有不同的

大小。常见的是1024,2048和4096字节,这是取决分区大小。

2b2d8ba328dcd738b0811bef69fccee0.png

sar

使用sar命令可以收集、展示和保存系统信息。sar命令由三个部分组成:sar,显示数据,sa1

和sa2,收集和存储数据。sar工具是sysstat包的一部分。

73bf54d4fb74b9fb2390e5dfe738fec1.png

mpstat

mpstat是一个可以展示多处理器服务器上每个可用CPU活动信息的命令。所有CPU的平均活

动情况也会显示出来。mpstat也是sysstat包的一部分。

mpstat工具可以全面展示系统或者CPU的统计信息。通过给mpstat传递采样频率和采样次

数,可以模拟vmstat的使用。下图展示了通过mpstat -P ALL 来输出每个CPU的平均使用率。

94dbf5eb811ecae3123b3b3eb6831135.png

numastat

在企业数据中心,非统一内存架构(Non-Uniform Memory Architecture ,NUMA)已经变成主流,例如IBM System x3950,然而,NUMA系统给调优带来了新的挑战。在NUMA出现之前,我们从来不需要关心内存的位置。幸好,企业Linux发行版为监测NUMA架构行为提供了工具。numastat命令提供本地和远程内存使用率和所有节点的整体内存配置。本地内存分配失败的信息在numa_miss一行展示,远程内存(shower memory)分配信息在numa_foregin一行展示。过度的使用远程内存会增加风险,可能导致整体性能下降。把进程绑定映射本地内存的节点会增加性能。

97eac84fbd347c0ed0398a66915687a4.png

pmap

pmap命令会展示一个或多个进程正在使用的内存量。使用这一工具,你可以确定服务器上的

哪一个进程正在分配内存,还有是否这部分内存导致了内存瓶颈。更多信息,使用pmap -d 1选项。

fc013cbf7e9dabcd6847e6e72f0f4604.png

最后一行显示的信息最为有用:

mapped 该进程映射到文件的内存量。writable/private 该进程使用的私有地址空间。shared 该进程和其它进程共享的地址空间量。

netstat

netstat 是最常用的工具之一,如果你从事网络工作,你应该对这个命令很熟悉。它会展示网

络相关的信息,例如socket使用,路由,接口,协议和其它网络统计。

deca7ddcb54941fbe2f08083a759de44.png

有如下的基础选项:

-a 显示所有的socket信息-r 显示路由信息-i 显示网络接口统计-s 显示网络协议统计


Socket信息解释:

Proto socket使用的协议(tcp,udp,raw)。

Recv-Q 表示收到的数据已经在本地接收缓冲,但是还有多少没有被进程取走,单位是字

节。

Send-Q 对方没有收到的数据或者说没有Ack的,还是本地缓冲区,单位字节。

Local Address socket的本地地址和端口。除非使用–numeric(-n)选项,socket地址会被

解释成主机名(FQDN),端口号会被转成相应的服务名字。

Foreign Address 远端socket的端口和地址。

State socket的状态。因为raw和UDP通常是没有状态的,所以这列可能是空白。

iptraf

iptraf监控和展示TCP/IP的实时流量。它可以根据各个session、接口、协议展示TCP/IP流量

统计。iptraf组件是由iptraf包提供。

iptraf给我们展示如下的报告:

IP流量监控:通过TCP连接的网络流量统计接口一般统计:网络接口流量统计接口详细统计:根据端口的网络流量统计统计分析:根据TCP/UDP端口和包大小的网络流量统计。局域网统计:根据网络2层地址的网络流量统计。

tcmpdump / ethereal

tcpdump和ethereal通常用来抓取和分析网络流量。这两个工具都会用到libpcap库来抓取包。

在混杂模式下,它们会监控网卡上的所有流量,并且抓取所有网卡上收到的分片。为了抓取

所有包,这些命令应该使用超级用户权限执行,以便开启网卡混杂模式。

你可以使用这些工具来找到和网络相关的问题。可以发现TCP/IP重传,滑动窗口大小变化,

名字解析问题、网络错误配置等。记住,这些工具只能监控所有到达网卡的分片,而不是所

有的网络流量。


1、tcpdump

tcpdump是一个简单和强大的工具。它拥有基本的协议分析能力,可以获得网络上的大体情

况。tcpdump可以使用很多选项和扩展表达式来过滤要抓取的包。入门可以看看如下的几个选项:

-i 指定网络接口-e 打印数据链路层头-s 抓取每个包的字节-n 避免DNS解析-w 写入文件-r 从文件读取-v,-vv,-vvv 详细输出

抓取过滤器的表达式:

关键字:

源目主机,源目端口,tcp,udp,icmp,源目网络等等

联合逻辑使用

非 ('!'或者'not')与 ('&&'或者'and')或 ('||'或者'or')
9039baf603d1d91247a53c982af78b01.png

DNS查询包


2、ethereal

ethereal有和tcpdump相似的功能,但是更加复杂,并且拥有更高级的协议分析和报告能力。

它还拥有一个GUI接口和ethereal命令行界面。

和tcpdump类似,ethereal也可以使用过滤抓取,从而缩小抓取分片的范围。如下是一些常用

的表达式。

IP

ip.version ==6 and ip.len > 1450ip.addr == 129.111.0.0/16ip.dst eq www.example.com and ip.src == 192.168.1.1not ip.addr eq 192.168.4.1

TCP/UDP

tcp.port eq 22tcp.port == 80 and ip.src == 192.168.2.1tcp.dstport == 80 and (tcp.flags.syn == 1 or tcp.flags.fin == 1)tcp.srcport == 80 and (tcp.flags.syn == 1 and tcp.flags.ack == 1)tcp.dstport == 80 and tcp.flags == 0x21

应用层

http.request.method == "POST "smb.path contains SERVERSHARE

nmon

Nigel’s Monitor简称nmon,是由Nigel Griffiths开发的监控Linux系统性能的常用工具。由于nmon能监控多个子系统的性能信息,所以,可以把它作为性能监控的唯一工具。通过nmon可以获取的信息有:处理器利用率、内存利用率、运行队列信息、磁盘I/O统计和网络I/O统计,页活动信息和进程指标。

nmon输出的CSV文件可以导入电子表格应用中,生成可视化图形报告,要使用该功能,启动nmon的时候需要带上-f选项。例如使用如下命令,让nmon生成30秒钟为频率,总时长1小时的报告。

# nmon -f -s 30 -c 120

strace

strace命令会拦截和记录进程的系统调用或进程接收到的信号。这是一个有用的诊断、教学和

调试工具。它在解决程序遇到的问题方面很有价值。

使用时,需要指定要监控的进程ID:

strace -p

72b1c4790269c58a6edfd8eec1c0d1a0.png

Proc文件系统

proc文件系统不是真实的文件系统,但是它真的十分有用。它不是存储数据的;而是提供运

行内核的监控和操作接口。proc文件系统让管理员可以监控和修改运行中的内核。下图展示

了一个简单的proc文件系统。大多数Linux性能工具都要依赖于/proc提供的信息。

4643d33060dbd1ed47b090adeea6e913.png

proc文件系统下的信息和布局:

/proc目录下的文件

/proc根目录下的各种文件里面包含相关系统的统计。你可以找到Linux工具使用的信息源,例如vmstat和cpuinfo文件。

数字1到X

各个数字的子目录指向的是运行进程或者它们的进程ID(PID)。目录结构总是已PID 1开始,指向的是init进程,然后是系统上运行的各个PID。每个数字子目录下保存进程相关的统计信息。例如进程映射的虚拟内存。

acpi

ACPI意思是高级配置与电源接口(advanced configuration and power interface),,受到大多数现代桌面和笔记本系统支持。由于ACPI主要是PC技术,所以在服务器上通常是禁用状态。

总线(bus)

这个子目录包含总线子系统的信息,例如PCI总线或者系统USB接口。

irq

irq目录包含系统中断的信息。这个目录下的每个子目录代表一次中断,也可能是一个附加设备,例如网卡。在irq子目录下,你可以修改一个给定中断的CPU关联(affinity)。

net

网络子目录下包含网络接口的原始统计数据,例如收到的多播包或接口的路由。

scsi

scsi子目录包含系统上关于SCSI子系统的信息,例如附加设备或者驱动调整。

sys

在sys子目录下,是可调整的内核参数,例如虚拟内存管理器或者是网络栈的行为。

tty

虚拟终端和附加的物理设备信息都包含在tty子目录中


篇幅有限,关于linux性能监控工具就大概介绍到这了,大家有空可以自己测试下,后面会分享更多linux方面的内容,感兴趣的朋友可以关注下!!

cc956a711c6dd7423e4ae72cffd0ddbe.gif