导读目录:合格的性能测试工程师要求
- 性能测试划分
- 性能测试准备工作
- 性能测试常见问题
- Linux监控
- 数据库监控
- 服务器参数配置
前端性能框架:
- Selenium+YSlow+ShowSlow实现页面性能评估自动化,还是不错的工具。
1.性能测试划分
- 配置测试:硬件选型,软件参数配置(数据库,服务器配置)
- 基准测试:以前版本作为基准
- 负载测试:找系统瓶颈,评估性能指标,更多的是过程,阶梯式
- 压力测试:高负载是压力,让系统崩溃,看恢复能力以及时间
2.性能测试前评估
- 关键业务
- 日PV量
- 逻辑复杂度
- 运营推广
- 内存和CPU消耗高的业务
3.通常问题
- 一般性能测试构造数据时不要相同,因为可以避开缓存影响,需要测试缓存可以在处理
- 明确可用负载机,服务器软硬件信息
- 明确业务数据流走向,才可以更好的在出现问题时排查问题
- LR中声明局部变量放在脚本开头
- LR全局变量在globals.h中声明
- 网络瓶颈:内网100M,吞吐率不能超过100/8=12.5
-
Ip欺骗时,主机应该单网卡,设置为静态IP,多网卡应禁用
- Get请求:发送数据少,返回数据多;Post请求:发送数据多,返回数据少,大部分关联都是在post数据中
-
添加负载机时,要勾选Use the Perc…选项,才可以一个脚本在多个负载机上运行,
否则只能同个脚本按组跑,可设置不同负载机ip
4.性能排查思路
-
当性能指标出现拐点时:
- 负载机硬件资源
- 网络瓶颈 -- 观察网络吞吐量计算
- 服务器硬件资源 -- cpu,内存,磁盘
- 数据库服务器硬件资源 -- cpu,内存,磁盘
- 服务器的各项参数配置,若分布式需检查配置是否生效,以及请求分配规则是否合理
- 数据库各项性能指标 -- 下面有细节分析过程
- sql反推到代码块
- 第三方监控工具,监控运行代码;例如:jprofiler(java) xhprof(php)
5.性能测试结果分析以及定位
-
Linux相关信息采集(向运维学习)
-
闲谈:
- Linux调优需要知识很庞大,我们并不是运维人员,但可以通过关键指标数据发现直观的问题和提出合理的建议
-
常用的几个小命令:
- netstat: 查看端口
- wc -l: 统计数量
- grep: 过滤条件
-
top
-
Load Avg:三个数值(主要看系统cpu核数,例如:1核,那么负载值小于等于1都是无压力的,若大于1可能已经出现部分拥堵)
- 一分钟时负载
- 二分钟时负载
- 三分钟时负载
-
Load Avg:三个数值(主要看系统cpu核数,例如:1核,那么负载值小于等于1都是无压力的,若大于1可能已经出现部分拥堵)
-
iostat -x,系统IO使用监控
-
Cpu
- %user: 在用户级别运行所使用的CPU的百分比
- %sys: 在系统级别(kernel)运行所使用CPU的百分比
- %iowait: CPU等待硬件I/O时,所占用CPU百分比
- %idle: CPU空闲时间的百分比
-
Device
- tps: 每秒钟发送到的I/O请求数
- avgqu-sz: 是平均请求队列的长度,毫无疑问,队列长度越短越好
- await:每一个IO请求的处理的平均时间(单位是微秒毫秒)
- rkB/s: 每秒读取数据量
- wkB/s: 每秒写入数据量
- %util: 磁盘的繁忙程度,如接近100%那说明磁盘已经到瓶颈
-
Cpu
-
vmstat,服务器的CPU使用率,内存使用,虚拟内存交换情况,IO读写情况
-
Cpu
- r: 运行队列,当这个值超过了CPU数目,就出现CPU瓶颈了
- us: 用户CPU时间
- sy: 系统CPU时间,如果太高,表示系统调用时间长
- id: 空闲 CPU时间,一般来说,id + us + sy = 100
-
Memory
-
swpd: 虚拟内存已使用的大小
- 如果大于0,表示你的机器物理内存不足,不是程序内存泄露的原因,应该升级硬件了
- free: 空闲的物理内存的大小
-
swpd: 虚拟内存已使用的大小
-
Swap
-
si: 每秒从磁盘读入虚拟内存的大小
- 如果这个值大于0,表示物理内存不够用或者内存泄露了,要查找耗内存进程解决掉
- so: 每秒虚拟内存写入磁盘的大小,如果这个值大于0,同si
-
si: 每秒从磁盘读入虚拟内存的大小
-
System
- in: 每秒CPU的中断次数,包括时间中断
-
cs: 每秒上下文切换次数,线程/进城的切换
- 该值过大表明CPU大部分浪费在上下文切换,导致CPU干正经事的时间少了,CPU没有充分利用
-
Cpu
-
Nmon,IBM公司产品,公司不保证准确性的系统监控工具,简单易用,一行命令
- 这个工具可以满足你对性能监控的大部分数据获取,而且文件数据过大也会丢失数据--可能我使用方式不对
-
闲谈:
-
数据库相关优化信息(向DBA靠近)
-
闲谈:
-
数据库很多种,常用也就几种,但作为测试想去做好调优同样不现实,关键性指标是我们提出合理化建议的武器
正确的职责定位会让你有更好的进步空间 -
面试常会被问到而且有意思的sql
- mysql: select * from 表名 where 条件 order by 字段 limit 1,3(指针从1开始,取3条记录)
- postgresql: select * from 表名 where 条件 order by 字段 limit 2 OFFSET 0(指针从0开始,取2条记录)
- sqlserver: select top 10 * from ( select top 20 * from 表明 order by 字段q asc) a order by 字段q desc(取10到19条记录)
- oracle: select * from (select rownum as rn,id from 表名 where 条件 order by 字段) where rn=行数 ( 或者 rn between n and m (取第n到第m条记录))
-
数据库通常监控指标:
- 数据库连接数
- 慢查询sql
- 线程池大小
- 每秒事务数
- QueryCache命中率
- 锁定状态
-
数据库很多种,常用也就几种,但作为测试想去做好调优同样不现实,关键性指标是我们提出合理化建议的武器
-
Memcache(缓存数据库)
-
查看运行状态信息: 连接到memcache,运行命令status,查看参数值
- memcache命中率:get_hits/cmd_get*100% (1.cmd_get:总请求次数;2.get_hits:总命中次数)
-
查看运行状态信息: 连接到memcache,运行命令status,查看参数值
-
Redis(缓存数据库)
-
查看运行状态信息:连接redis,执行命令info,查看参数值
- Redis命中率:keyspace_hits/(keyspace_hits+keyspace_misses)*100% (1.keyspace_hits:命中次数;2.keyspace_misses未命中次数)
-
查看运行状态信息:连接redis,执行命令info,查看参数值
-
Mysql
-
mysql两种引擎:
- MyISAM:表锁--一般不会在使用表锁
- InnoDB:行锁--常用
- 表索引查看命令:desc 表名
- 查看设置:show variables like…
- 查看状态:show global status like…
-
慢查询设置:show variables like ‘%slow%’;
- 需要开启慢查询日志,因慢查询日志耗费性能,建议独立一台机器写慢查询log
- 设置慢查询时间,一般在5s内即可
- 设置慢查询log位置
-
慢查询语句:show global status like ‘%slow%’;
- 展示大于查询时间的sql数量
- 根据慢查询可以判断是索引问题还是sql语句编写问题
- mysql最大连接数配置信息:show variables like ‘max_connections’;
-
mysql当前连接数: show global status like ‘Max_used_connections’;
- 例如:最大连接数10个,每秒请求数据库连接数确是100个,可想不是很合理
-
key_buffer_size索引缓存命中率(内存中)
-
key_buffer_size是对MyISAM引擎性能影响最大的一个参数
- 查询配置:show variables like ‘key_buffer_size’;
- 查询当前读状态:show global status like ‘key_read%’;
-
查询当前写状态:show global status like ‘key_write%’;
- 返回参数Key_read_requests:读索引请求总数
- 返回参数Key_reads:未从内存中找到,从磁盘读取的信息
- 返回参数Key_write_requests:写索引请求总数
- 返回参数Key_writes:写如磁盘的请求
-
命中率为:
- 读命中率:key_buffer_read_hits=(1-Key_reads/Key_read_requests)*100%
- 写命中率:key_buffer_write_hits=(1-Key_writes/Key_write_requests)*100%
-
key_buffer_size是对MyISAM引擎性能影响最大的一个参数
-
InnodbBuffer缓存命中率(内存中)
- 缓存Innodb类型表的数据和索引的内存空间
- InnodbBuffer是对InnoDB引擎性能影响最大的一个参数
- 查询当前读状态:show status like ‘Innodb_buffer_pool_read%’;
-
查询当前写状态:show status like ‘Innodb_buffer_pool_write%’; *命中率:
- 读命中率:innodb_buffer_read_hits=(1-Innodb_buffer_pool_reads/Innodb_buffer_pool_read_requests)*100%
- 写命中率:……
-
查询线程池设置:show variables like ‘thread%’;
- 线程池在短链接中功效更明显,频繁的生成和销毁连接
-
thread_cache_size:线程池中应该存放的连接线程数
- 启动时,mysql不会全部创建,随着请求线程使用完,被释放存到线程池中,当线程池达到最大值,不在放入线程池
- thread_stack:初始化每个线程分配内存大小
- 查询配置:show variables like ‘thread%’;
-
系统被连接的次数:show status like ‘Connections’;
- 连接总数:Connections
-
查询状态:show status like ‘%thread%’;
- Threads_created:创建过的线程,若数值较大,说明配置的thread_cache_size太小不合理,需要增加
- Threads_cached: 线程池中缓存的线程
- Thread Cache命中率(90%以上最优): Threads_Cache_Hit=(Connections-Threads_created)/Connections*100%
-
行锁
-
查询状态:show status like ‘%lock%’;
- Innodb_row_lock_current_waits:当前等待锁的数量,阻塞数量
- Innodb_row_lock_time_avg:每次平均锁定的时间
- Innodb_row_lock_time_max:最长一次锁定时间
- Innodb_row_lock_waits:系统启动到现在、总共锁定次数
- 查询最近一次死锁:show engine innodb status;
-
查询状态:show status like ‘%lock%’;
-
mysql两种引擎:
- 原来写文档也这么累,先歇歇,[3月31号]更新完后面内容~--临时变更,我先学习java,感觉java熟悉后,会给出更多的建议;
- Postgre
- Mongo
- Oracle
-
闲谈:
-
服务器相关参数优化
- Nginx
- Apache
下面是配套资料,对于做【软件测试】的朋友来说应该是最全面最完整的备战仓库,这个仓库也陪伴我走过了最艰难的路程,希望也能帮助到你!
最后:
可以在公众号:程序员小濠 ! 免费领取一份216页软件测试工程师面试宝典文档资料。以及相对应的视频学习教程免费分享!,其中包括了有基础知识、Linux必备、Shell、互联网程序原理、Mysql数据库、抓包工具专题、接口测试工具、测试进阶-Python编程、Web自动化测试、APP自动化测试、接口自动化测试、测试高级持续集成、测试架构开发测试框架、性能测试、安全测试等。
学习不要孤军奋战,最好是能抱团取暖,相互成就一起成长,群众效应的效果是非常强大的,大家一起学习,一起打卡,会更有学习动力,也更能坚持下去。
你可以加入我们的测试技术交流扣扣群:310357728(里面有各种软件测试资源和技术讨论)
喜欢软件测试的小伙伴们,如果我的博客对你有帮助、如果你喜欢我的博客内容,请 “点赞” “评论” “收藏” 一键三连哦!
版权声明:本文为IT_LanTian原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。