qps

QPS 原理：每天80%的访问集中在20%的时间里，这20%时间叫做峰值时间。 公式：( 总PV数 * 80% ) / ( 每天秒数 * 20% ) = 峰值时间每秒请求数(QPS) 。 机器：峰值时间每秒QPS / 单台机器的QPS = 需要的机器 。 每天300w PV 的在单台机器上，这台机器需要多少QPS？ ( 3000000 * 0.8 ) / (86400 * 0.2 ) = 139 (QPS)。 一般需要达到139QPS，因为是峰值。 QPS 每秒查询率QPS是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准。 每秒查询率 因特网上，经常用每秒查询率来衡量域名系统服务器的机器的性能，其即为QPS。 对应fetches/sec，即每秒的响应请求数，也即是最大吞吐能力。 计算机语言 一种计算机编程语言。用于数据分析和报表产出。运作的平台是MRDCL。支持的数据文件包括ASC格式和CSI格式。 其中CSI格式为QPS独有数据格式。是极其专业的用于数据分析、数据清理和报表产出的语言，目前应用最广的是市场调研行业。中国国内运用的相对比较少。 开发的原因，需要对吞吐量（TPS）、QPS、并发数、响应时间（RT）几个概念做下了解，查自百度百科，记录如下： 1. 响应时间(RT) 　　响应时间是指系统对请求作出响应的时间。直观上看

1.1 高并发介绍 　　1、高并发中一些概念 　　　　　　 1. PV(访问量)： 页面访问量，页面刷新一次算一次。 　　　　　 　2. UV(独立访客)： 即Unique Visitor，一个客户端（电脑，手机）为一个访客； 　　　　　 　3. DAU(日活跃用户数)： 登录或使用了某个产品的用户数，这与流量统计工具里的访客（UV）概念相似。 　　　 　　　4. 峰值QPS： 　　　　　　　　　　 原理： 每天80%的访问集中在20%的时间里，这20%时间叫做峰值时间 　　　　　　　　　　 公式： ( 总PV数 * 80% ) / ( 每天秒数 * 20% ) = 峰值时间每秒请求数(QPS) 　　　　　　 5. QPS/TPS(每秒查询率)： 每秒能够查询次数（QPS/TPS= 并发数 / 平均响应时间） 　　　　　　　　　　 并发数： 并发数是指系统同时能处理的请求数量，这个也是反应了系统的负载能力。 　　　　　　　　　　 吐吞量： 吞吐量是指系统在单位时间内处理请求的数量 　　　　　　　　　　 响应时间（RT）： 响应时间是指系统对请求作出响应的时间，一般取平均响应时间 　　2、举例说明 　　　　1）例1： 　　　　　　　　1. 假设1秒钟100个请求，处理每个请求需要花2秒， 　　　　　　　　2. 那么 50（每秒可以处理50个请求，即QPS使50） = 100

QPS: 每秒查询率（Query Per Second），每秒的响应请求数，也即是最大吞吐能力。 QPS = rep/sec = 请求数/秒 QPS 统计方式【一般使用http_load进行统计】 QPS = 总请求数 / (进程总数 *请求时间) QPS: 单个进程每秒请求服务器的成功次数 峰值 QPS: 每天 80% 的访问集中在 20% 的时间里，这 20% 的时间叫做峰值时间 公式： （总 pv 数 * 80%）/ (每天秒数 * 20%) = 峰值时间每秒请求数据（QPS） PV: 访问量即 Page View，即页面浏览量或点击量，用户每次刷新即被计算一次单台服务器每天 PV 计算 公式1： 每天总 PV = QPS * 3600 * 6 公式2： 每天总 PV = QPS * 3600 * 8 UV: 独立访客即 Unique Visitor，访问您网站的电脑哭护短为一个访客，00:00-24:00 内相同的客户端只被计算一次服务器数量 机器： 峰值时间每秒 QPS / 单台机器的 QPS = 需要的机器 机器: ceil (每天总 PV / 单台服务器每天总 PV) 并发数： 并发用户数是指系统可以同时承载的这正常使用系统功能的要用户的数量 吞吐量： 吞吐量是指系统在单位时间内处理的请求的数量 响应时间（RT） 响应时间是指系统对请求作出的响应的时间 例子： 每天

0x01 前言 在这之前想必大家对ab(http)与abs(https)也有一些了解,我们今天不去看ab和abs, SuperBenchmarker (sb.exe)是一个压测工具,他是一个受Apache Benchmark的启发,他会在终端窗口为我们显示最终的结果,同时也会在web界面生成一个动态结果。 SuperBenchmarker (sb.exe)可以在Windows或者Mac上运行(尚未在Linux上进行测试),他可以安装在.NET4.52+或者.NET Core2.0+。 0x02 安装 我们可以直接拉取源代码进行构建 git clone https://github.com/aliostad/SuperBenchmarker cd SuperBenchmarker ./build.sh 0x03 参数 -c --concurrency (Default: 1) 并发请求数 -n, --numberOfRequests (Default: 100) 请求数量 -m, --method (Default: GET) HTTP Method -u, --url 请求地址，也就是需要压测的地址 -v,--verbose：输出详细 -h, --headers：输出HTTP Header -k, --cookies：输出cookie -q, --onlyRequest

QPS:即Queries Per Second的缩写，每秒能处理查询数目。是一台服务器每秒能够相应的查询次数，是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准。 TPS:即Transactions Per Second的缩写，每秒处理的事务数目。一个事务是指一个客户机向服务器发送请求然后服务器做出反应的过程。客户机在发送请求时开始计时，收到服务器响应后结束计时，以此来计算使用的时间和完成的事务个数，最终利用这些信息作出的评估分。 RPS: 即Requests Per Second的缩写，每秒能处理的请求数目。等效于QPS 吞吐量: 每秒的响应请求数，也即是最大吞吐能力 计算关系： QPS = 并发量 / 平均响应时间 并发量 = QPS * 平均响应时间 举例: 根据以上计算关系，我们来预估下单日访问量在 1000W 需要多大的QPS来支持： 通常情况下，80% 的访问量集中在 20%的时间，算一下这 1000w pv实际需要机器达到多少qps才能满足， qps = (1000w * 0.8) / (24 * 3600 * 0.2) qps = 462.9 JedisPool资源池优化建议: 1、maxTotal：最大连接数 以一个例子说明，假设: 一次命令时间（borrow|return resource + Jedis执行命令(含网络) ）的平均耗时约为1ms

1、V 即 page view，页面浏览量 用户每一次对网站中的每个页面访问均被记录1次。用户对同一页面的多次刷新，访问量累计。 2、UV 即 Unique visitor，独立访客 通过客户端的cookies实现。即同一页面，客户端多次点击只计算一次，访问量不累计。 3、IP 即 Internet Protocol 本意本是指网络协议，在数据统计这块指通过ip的访问量。即同一页面，客户端使用同一个IP访问多次只计算一次，访问量不累计。 4、TPS 即Transactions Per Second的缩写，每秒处理的事务数目。一个事务是指一个客户机向服务器发送请求然后服务器做出反应的过程。客户机在发送请求时开始计时，收到服务器响应后结束计时，以此来计算使用的时间和完成的事务个数，最终利用这些信息作出的评估分。 5、QPS 即Queries Per Second的缩写，每秒能处理查询数目。是一台服务器每秒能够相应的查询次数，是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准。 RPS 即Requests Per Second的缩写，每秒能处理的请求数目。等效于QPS 因特网上，经常用每秒查询率来衡量域名系统服务器的机器的性能，其即为QPS。 对应fetches/sec，即每秒的响应请求数，也即是最大吞吐能力。 计算关系： QPS = 并发量 / 平均响应时间 并发量 =

什么是QPS？ 每秒的响应请求数，也即是最大吞吐能力 QPS = 总请求数 / ( 进程总数 * 请求时间 ) 什么是PV？ page view 即页面浏览量，或点击量；通常是衡量一个媒体频道或网站甚至一条网络文章的主要指标。 什么是UV？ uv的全称是unique view，译为通过互联网访问、浏览这个网页的自然人，访问网站的一台电脑客户端被视为一个访客，在同一天内相同的客户端只被计算一次。 如果网站每天要承受100万次PV，那么它需要多少的QPS？ 1000000 * 0.8（峰值QPS，意思是每天80%的访问量集中在20%的时间里）/ 86400（每天的秒数）* 20%（每天的20%时间） = 46 QPS 如果网站单台服务器QPS为10，那么需要几台机器？ 46 / 10 = 4.6 ≈ 5 需要5台 QPS是否等于并发数？ 不等于，两者没有什么关联 QPS是指这个网站每秒有多少次请求 并发是指这个网站有多少个用户在同时请求 如果一个用户一秒钟请求了20次，那么这个网站的QPS就是20，并发数1。 如果20个用户在一秒钟内 同时 每人请求了一次，那么这个网站的QPS就是20，并发数也为20。 一个服务器不仅要提高QPS的吞吐量，同时要提高承受的并发数 如何从整体上处理高并发 可以从多个层面上去回答： 数据库方面 1.优化数据库索引 2.优化查询语句

系统模块 cpu 字段含义 user: 表示CPU执行用户进程的时间,通常期望用户空间CPU越高越好. sys: 表示CPU在内核运行时间,系统CPU占用率高,表明系统某部分存在瓶颈.通常值越低越好. wait: CPU在等待I/O操作完成所花费的时间.系统部应该花费大量时间来等待I/O操作,否则就说明I/O存在瓶颈. hirq: 系统处理硬中断所花费的时间百分比 sirq: 系统处理软中断所花费的时间百分比 util: CPU总使用的时间百分比 nice: 系统调整进程优先级所花费的时间百分比 steal: 被强制等待（involuntary wait）虚拟CPU的时间,此时hypervisor在为另一个虚拟处理器服务 ncpu: CPU的总个数 采集方式 CPU的占用率计算,都是根据/proc/stat计数器文件而来,stat文件的内容基本格式是: cpu 67793686 1353560 66172807 4167536491 2705057 0 195975 609768 cpu0 10529517 944309 11652564 835725059 2150687 0 74605 196726 cpu1 14380773 127146 13908869 832565666 150815 0 31780 108418 cpu是总的信息,cpu0

五、应用程序优化：代码级优化 1、优化思路 做优化首先要知道从哪里入手，也就是要知道系统的瓶颈在哪里。一个请求会消耗很多资源：CPU、内存、网络、磁盘等。这些资源中总会有一个到达瓶颈，只有优化最先到达瓶颈的资源才会产生效果。 压测工具 Java有两个经典的代码热点分析工具：JProfiler和Yourkit Apache ab压测工具 这些具体使用参考文档。 发现瓶颈 Jstack，可以看看当前的Java线程 压测请求不是本机，要注意TCP连接数，可以使用netstat命令 检查网卡是否达到了瓶颈 I/O也可能成为瓶颈 2、影响性能的因素 所谓提升性能，通常意义上就是提升系统的QPS，即提升系统的吞吐量。 要提升系统的QPS，首先要了解QPS与RT的关系。 QPS与性能的关系 支持的线程数越多QPS越高，这只在一定范围内适用。 影响线程数量的两个主要因素是CPU数量和线程等待时间。 对于大部分的Web系统，RT(response tiime)一般由CPU执行时间和线程等待时间(远程RPC调用、I/O等待、sleep、wait等)组成。 减少CPU的执行时间对QPS有实质的提升，减少线程的等待时间对QPS提升不明显。 设置最佳线程数 所谓最佳线程数是指消耗完服务器的瓶颈资源的一个临界线程数量。 最佳线程数=[(线程等待时间+线程CPU时间)/线程CPU时间]/CPU数量。

MySQL 的QPS吞吐量或者说TPS与很多因素有关，例如CPU、内存以及硬盘等。 《高性能MySQL》第三版 1.5小节对各个版本的MySQL进行了测试，其结果如下。 测试机器 测试机器Cisco UCSC250 内存384GB 存储引擎是InnoDB 测试的数据集2.5GB MySQL的buffer pool设置为4GB 从上面的数据看，最大QPS 不到8000。 对于插入和更新操作的吞吐量，可以推测大约就是这个数字附近。 网上搜索其他测试数据，QPS大约是7000左右。 参考 《高性能MySQL》第3版 https://www.cnblogs.com/springsource/p/5961048.html http://yansu.org/2014/04/16/insert-large-number-of-data-in-mysql.html 来源： CSDN 作者： kingmax54212008 链接： https://blog.csdn.net/kingmax54212008/article/details/104104601