在分布式开发中,我们将每一一种服务都抽取成一个独立的模块,微服务模块在真正的上线之前,甚至是上线以后,我们都要进行压力测试,才能投入正常的使用。

压力测试是为了我们的系统在当前软硬件环境下,最大的负荷量,也就是系统瓶颈。

知道了系统瓶颈,就可以通过一些负载均衡配置,避免给系统在单位时间内发送太多的请求,导致系统被压垮,以至于宕机。

同时压测也是我们优化的一个重要手段,使用压力测试,我们有希望找到很多种用其他测试方法更难发现的错误。有两种错误类型是:内存泄漏,并发与同步

  • 内存泄漏:调用的接口在一个很多次的循环内不断的创建对象,当并发达到百万的时候,就会创建很多对象,以至于内存撑爆

性能指标

  1. 响应时间(Response Time: RT)
    响应时间指用户从客户端发起一个请求开始,到客户端接收到从服务器端返回的响应结束,整个过程所耗费的时间。

  2. HPS(Hits Per Second) :每秒点击次数,单位是次/秒。

  3. TPS(Transaction per Second):系统每秒处理交易数,单位是笔/秒。
    可以理解为一个事务,不仅仅是数据库的事务,例如下单需要库存、购物车、计算价格等等,全部完成,则为一个事务。

  4. QPS(Query per Second):系统每秒处理查询次数,单位是次/秒。
    对于互联网业务中,如果某些业务有且仅有一个请求连接,那么 TPS=QPS=HPS,一般情况下用 TPS 来衡量整个业务流程,用 QPS 来衡量接口查询次数,用 HPS 来表示对服务器单击请求。

无论 TPS、QPS、HPS,此指标是衡量系统处理能力非常重要的指标,越大越好,根据经验,一般情况下:

  • 金融行业:1000TPS~50000TPS,不包括互联网化的活动(秒杀)
    保险行业:100TPS~100000TPS,不包括互联网化的活动
    制造行业:10TPS~5000TPS
    互联网电子商务:10000TPS~1000000TPS
    互联网中型网站:1000TPS~50000TPS
    互联网小型网站:500TPS~10000TPS

最大响应时间(Max Response Time) 指用户发出请求或者指令到系统做出反应(响应)的最大时间。
最少响应时间(Mininum ResponseTime) 指用户发出请求或者指令到系统做出反应(响应)的最少时间。
90%响应时间(90% Response Time) 是指所有用户的响应时间进行排序,第 90%的响应时间。

从外部看,性能测试主要关注如下三个指标

  • 吞吐量:每秒钟系统能够处理的请求数、任务数(QPS、TPS)。
    响应时间:服务处理一个请求或一个任务的耗时。
    错误率:一批请求中结果出错的请求所占比例。

jmeter

官网下载二进制文件

线程组

JMeter Address Already in use 错误解决

windows 本身提供的端口访问机制的问题。
Windows 提供给 TCP/IP 链接的端口为 1024-5000,并且要四分钟来循环回收他们。就导致我们在短时间内跑大量的请求时将端口占满了。

  1. cmd 中,用 regedit 命令打开注册表
  2. HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Services\Tcpip\Parameters 下,
    1. 右击 parameters,添加一个新的 DWORD,名字为 MaxUserPort
    2. 然后双击 MaxUserPort,输入数值数据为 65534,基数选择十进制(如果是分布式运行的话,控制机器和负载机器都需要这样操作哦)
    3. TCPTimedWaitDelay:30(操作和2一样)
  3. 修改配置完毕之后记得重启机器才会生效
    https://support.microsoft.com/zh-cn/help/196271/when-you-try-to-connect-from-tcp-ports-greater-than-5000-you-receive-t

性能优化

我们使用jmeter对接口做了压测,可以得到这个接口的一些性能报告,我们通过衡量这些性能报告,就能知道这个接口有没有符合我们的性能要求,如果不符合,我们就要对接口进行优化。

优化需要考虑多方面:

  • 数据库、应用程序(我们的项目)、中间件(tomcat、nginx)、网络和操作系统等方面
  • 自己的应用属于
    • cpu密集型(cpu用的多,大量的计算)
      我们查到了一堆数据,需要计算、排序、过滤、整合等等
    • 还是io密集型(网络io,磁盘io,数据库io,redis io)。

性能优化主要在应用程序方面主要是优化我们项目接口的代码编写方式和jvm的堆,可以看java虚拟机的1.1.1 堆空间内存分配(默认情况下)

jvm性能监控我们用的是jdk自带的jvisualvm(dos窗口敲jvisualvm即可启动)


休眠:调用了sleep的线程
等待:使用了wait,等待被唤醒
驻留:线程池里空闲的线程
监视:几个线程发生了锁的竞争(阻塞的线程),正在等待锁的释放

jvisualvm需要安装一个插件,在工具-插件可用插件中,需要更新一下插件中心的地址,地址在这个地址找,https://visualvm.github.io/,但是win11怎么都打不开这个地址,我试过改dns、hosts,都不行,最后,我选择的是离线安装。

很奇怪,QQ浏览器是可以打开上面那个地址的,然后下载对应jdk版本的visual gc,然后在jvisualvm已下载中添加插件进行安装,重启jvisualvm。

开始压测

  • 虚拟机环境
    cpu2核,内存3G
  • 本地环境
    win11,i5-12500H,16核,16g
  • product服务和gateway服务100m

以下压测数据只能做一个参照标准,因为我们的压测和服务是在同一个机器,同时压测的话肯定会线程竞争,如果可以拿另外一台机器来请求进行压测,那就是相对于更标准的数据了。

…:数据有点儿离谱,不具有参考价值

压测内容 压测线程数 吞吐量/s 90%响应时间 99%响应时间 压测路径
nginx 50 3581 19 52 192.168.56.10:80
gateway 50 23448 4 12 127.0.0.1:88
简单服务 50 43525 2 5 127.0.0.1:12000/hello
gateway+简单服务 50 9637 8 13 127.0.0.1:88/hello
全链路(gateway+简单服务+nginx) 50 1867 55 77 gulimall.com/hello
首页一级菜单渲染 50 190(mysql,thymeleaf) 376 663 127.0.0.1:12000
首页一级菜单渲染(thymeleaf开缓存) 50 232 306 514 127.0.0.1:12000
首页一级菜单渲染(thymeleaf开缓存,优化数据库(加索引),关日志) 50 528 150 414 127.0.0.1:12000
三级分类数据获取 50 4(mysql) /8(上一行优化后的) 。。。 。。。 127.0.0.1:12000/index/catalog.json
三级分类数据获取(优化业务,只与数据库交互一次) 50 112 571 896 127.0.0.1:12000/index/catalog.json
三级分类数据获取(使用redis作为缓存) 50 463 121 157 127.0.0.1:12000/index/catalog.json
首页全量数据获取 50 15(静态资源) 127.0.0.1:12000
nginx+gateway 50
  • nginx是浪费cpu,,不浪费内存
    它总是把请求转交,它不需要创建对象,自然不需要多大的内存,
    它更多的是拥有更多的线程接收请求来处理,所以cpu来回在线程之间切换计算

  • gateway也是浪费cpu,和nginx的道理类似

    在压测gateway的同时我们打开jvisualvm,观察visual gc,我们发现Eden区内存只有32m,非常小,所以gc次数很多,花费很多不必要的时间,所以我们可以调整Eden区的大小,就会减少gc的时间,吞吐量就会增加

  • 简单服务就是在product模块写个返回hello字符串的请求,压测这个路径
    gateway product_route断言需要新增/hello

  • 通过简单服务和简单服务+gateway压测的对比,中间件越多,性能损失越大,大多都损失在网络交互。考虑优化的话,中间件的效率要提高,它们之间的传输效率要提高(用更好的网卡,使用更高效率的传输协议等)

  • 我们发现每过一个中间件,我们的响应时间都会加一点儿,虽然只有50ms,但是对于大并发计算机来说,累积效应起来,吞吐量就会损失很多。

首页全量数据获取是将数据库的资源请求,渲染html都算在其中,在Jmeter的HTTP请求高级勾选从HTML文件获取所有内含的资源

我们发现首页全量数据获取首页全量数据获取多了静态资源,从业务角度,我们需要优化:

  • db(mysql优化)
  • 模板的渲染速度
    模板渲染是浪费cpu的,cpu要计算,要插值,要把内存中的数据最终组装起来
  • 静态资源
    如果静态资源是放在微服务模块中,静态资源的获取是由tomcat来处理的,静态资源会剥夺很多的线程,整个吞吐量就会下去很多。

nginx动静分离

我们之前是将所有的请求,无论是动态请求还是静态请求,都是tomcat来处理的,那就会占用很多资源,所以吞吐量很低。

我们之前是将静态资源放在微服务中,现在我们将静态资源放在nginx中,动态请求nginx会将请求转交给网关,网关再交给微服务;静态资源由nginx直接返回。

  1. 以后将所有项目的静态资源都应该放在nginx里面
    将product模块resources/static文件夹下的index文件夹全部上传到虚拟中的/mydata/nginx/html/static/路径下

  2. 规则:/static/**所有请求都由nginx直接返回
    修改product模块resources/templates下的index.html,全部替换,href=“,href=”/static/,<script src=“,<script src=”/static/,<img src=“,<img src=”/static/,src=“index,src=”/static/index
    修改完之后,我们再访问首页,图片的地址应该是http://127.0.0.1:12000/static/index/img/section_second_list_img8.jpg

    • 修改nginx配置文件 /mydata/nginx/conf/conf.d/gulimall.conf
server {listen       80;server_name  gulimall.com;#charset koi8-r;#access_log  /var/log/nginx/log/host.access.log  main;# 如果请求路径是 /static,就请求nginx中的静态资源location /static/ {root /usr/share/nginx/html;}# 如果请求路径是/,就请求http://gulimalllocation / {proxy_set_header Host $host;proxy_pass http://gulimall;}#error_page  404              /404.html;# redirect server error pages to the static page /50x.html#error_page   500 502 503 504  /50x.html;location = /50x.html {root   /usr/share/nginx/html;}# proxy the PHP scripts to Apache listening on 127.0.0.1:80##location ~ \.php$ {#    proxy_pass   http://127.0.0.1;#}# pass the PHP scripts to FastCGI server listening on 127.0.0.1:9000##location ~ \.php$ {#    root           html;#    fastcgi_pass   127.0.0.1:9000;#    fastcgi_index  index.php;#    fastcgi_param  SCRIPT_FILENAME  /scripts$fastcgi_script_name;#    include        fastcgi_params;#}# deny access to .htaccess files, if Apache's document root# concurs with nginx's one##location ~ /\.ht {#    deny  all;#}
}

内存崩溃宕机异常

我们把jmeter线程调到200,发现不管是年轻代还是老年代的内存都爆满了,不久后tomcat线程会报异常了,内存溢出java.lang.OutofMemoryError:Java heap space等等,当我们再次访问首页时就会报找不到gulimall-product实例,这就是线上服务崩溃的整个过程。

我们持续在运行期间cpu内存爆满卡死,将我们应用挤下线,我们应用不能提供正常服务。

我们调整本地的运行内存,idea更改vm options -Xmx1024m -Xms1024m -Xmn512m

谷粒商城十二性能压测及优化相关推荐

  1. 谷粒商城项目篇8_分布式高级篇_商城首页、性能压测、优化(Nginx动静分离)

    目录 商城首页 整合thymeleaf springmvc的WebMvcAutoConfiguration 首页三级分类渲染 Nginx代理 Nginx代理会丢掉host信息 压力测试 性能检测 性能 ...

  2. Nginx 性能压测和分析优化

    服务端高并发系统离不开负载均衡,大中型公司下,负载均衡代理层都是有专人进行独立开发和建设的,那么作为负载均衡代理层的首选方案 Nginx,我们该如何进行压力测试.如何优化分析.如何用最少的机器承受最大 ...

  3. Mall商城的高级篇的开发(二)性能压测和性能监控

    Mall商城的高级篇的开发(二) 性能压测–压力测试 压力测试考察当前软件硬件环境下系统所能承受的最大负荷并帮助找出系统的瓶颈所在.压测都是为了系统在上线的处理能力和稳定性维持在一个标准的范围内,做到 ...

  4. 性能优化与压测引擎二:分布式压测引擎pea

    性能优化与压测引擎二:分布式压测引擎pea 分布式压测引擎pea 基本介绍 视频演示 创建任务 任务执行中的节点状态 整体报告 单个请求细节报告 分布式压测引擎pea 前面介绍了gatling是铺垫, ...

  5. Oracle的学习心得和知识总结(十八)|Oracle数据库性能压测工具swingbench的安装和使用及AWR ASH ADDM报告生成

    目录结构 注:提前言明 本文借鉴了以下博主.书籍或网站的内容,其列表如下: 1.参考书籍:<Oracle Database SQL Language Reference> 2.参考书籍:& ...

  6. 性能压测诡异的Requests/second 响应刺尖问题

    最近一段时间都在忙着转java项目最后的冲刺,前期的coding翻代码.debug.fixbug都逐渐收尾,进入上线前的性能压测. 虽然不是大促前的性能压测要求,但是为了安全起见,需要摸个底心里有个数 ...

  7. sysbench性能压测以及mysql性能压测

    sysbench性能压测以及mysql性能压测 一.Sysbench是一个模块化的.跨平台.多线程基准测试工具,主要用于各种不同系统的参数下的数据库负载情况. 主要测试方式 cpu性能 磁盘io性能 ...

  8. 记一次Socket.IO长链服务的性能压测

    网易云信IM系统中的Web版使用了Socket.IO实现浏览器环境下的长链服务:区别于常规的长链服务,为该服务的压测提出了一些新的挑战,本文总结了测试过程中的一些收获供参考. Part1 测试工具选项 ...

  9. 如何做好性能压测(一)丨压测环境设计和搭建

    简介:如何做好性能压测(一)丨压测环境设计和搭建 一般来说,保证执行性能压测的环境和生产环境高度一致是执行一次有效性能压测的首要原则.有时候,即便是压测环境和生产环境有很细微的差别,都有可能导致整个压 ...

最新文章

  1. 安全领域应该关注的网站
  2. 12个球问题--微软面试题
  3. 使用HashSet去除重复元素的集合
  4. google怎么做(2.相似网页算法)
  5. MVC3"不允许启动新事务,因为有其他线程正在该会话中运行"错误解决方法
  6. Markdown编辑器中字号、颜色的设置方法及一些好看的颜色示例
  7. strcore.cpp(156) 内存泄漏
  8. mongodb count 导致不正确的数量(mongodb count 一个坑)
  9. 纯新手DSP编程--5.21--DSP/BIOS使用
  10. Windows10更改电脑用户名
  11. Mybatis简介、环境搭建和详解
  12. react-native 列表组件的简单学习
  13. python微博接口_Python使用新浪微博API发送微博的例子
  14. python基础视频课件
  15. mean shift 跟踪算法
  16. Java实现微信聊天记录生成器
  17. python爬取微信公众号network_python如何爬取搜狗微信公众号文章永久链接的思路解析...
  18. Ubuntu日常使用命令记录
  19. 『幸运 9 点』IVR游戏商业计划书(转)
  20. 计算机病毒考试及答案,计算机病毒类考试题目以及参考答案.doc

热门文章

  1. 【巨杉数据库SequoiaDB】专注基础软件自研,巨杉入选“2020信创产业独角兽100强”
  2. 搞硬件的同事,最近和我聊了一件事
  3. 孙亚芳-探索以色列崛起之迹
  4. 64位投影机专业测试软件,软件分享 篇十四:利用投影仪提高生活质量 —— 自用软件推荐...
  5. C语言和Java哪个难学?
  6. c语言中大数相乘的方法,C++实现大数相乘算法
  7. 国内各路大数据交易平台现状
  8. 猎狗与兔子问题的Matlab编程思路与过程
  9. 德勤consulting oracle,【德勤 SAP - Technology - Consulting】-Utips校招-你的名企情报站
  10. 蚂蚁金服阳振坤:用10年时间打造一个“顶天立地”的产品...