热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

【MySQL数据库】第二章解读:MySQL基准测试

基准测试很、重、要!可以完成的工作:总的来说:测试硬件、预估硬件、验证系统、测压力、调配置1、验证基于系统的假设,确认假设是否符合实际情况;2、重现系统中某些异常行为,以解决;3、测试系统当前的运行情况,利用历史结果分析诊断无法预测的问题;4、模拟更高的负载找出系统随压力增加而可能遇到的扩展性瓶颈;5、规划未来的业务增长,硬件、网络容量、相关资源;6、测试应用适应可变环境的能力;7、测试不同的硬件、软件和操作系统配置,证明设备是否配置正确;
前言:

基准测试benchmark:基本技能,是针对系统设计的一种压力测试,是唯一方便有效、可学习系统在给定的工作负载下回发生什么 的方法,他可以观察系统在不同压力下的行为,评估系统的容量,掌握哪些是重要的变化,或观察系统如何处理不同的数据,可在系统实际负载外创建虚拟场景进行测试(掌握系统行为)

正文:

如前言,基准测试很、重、要!可以完成的工作: 总的来说:测试硬件、预估硬件、验证系统、测压力、调配置

1、验证基于系统的假设,确认假设是否符合实际情况;2、重现系统中某些异常行为,以解决;3、测试系统当前的运行情况,利用历史结果分析诊断无法预测的问题; 4、模拟更高的负载找出系统随压力增加而可能遇到的扩展性瓶颈;5、规划未来的业务增长,硬件、网络容量、相关资源;6、测试应用适应可变环境的能力;7、测试不同的硬件、软件和操作系统配置,证明设备是否配置正确;

对数据库的基准测试的作用,就是分析在当前的配置下(包括硬件配置、OS、数据库设置等),数据库的性能表现,从而找出MySQL的性能阈值,并根据实际系统的要求调整配置。【源】

与真实压力不同:真实的复杂多变;基准测试要求尽可能快执行完成,简单直接、结果易比较、成本低易行

2.2策略

针对系统整体:集成式full-stack

单独测试MySQL:单组件式single-component

推荐整体测试:要正确设置

1、用户关注的是整体的性能;2、MySQL并非总是瓶颈;3、更能揭示应用的真实表现

推荐单独测试:需要数据

1、需比较不同schema或查询的性能;2、针对某个具体问题的测试;3、避免漫长,做短期、快速周期循环

2.2.1指标

目标:细化为一系列问题,具体问题具体分析

吞吐量:

单位时间内事务处理数,TPC-C、多用户交互式应用,每秒事务数,每分钟事务数

响应时间或延迟

测试任务所需的整体时间,平均响时、最小响时、最大和所占百分比;借助图表

并发性:

测试应用在不同并发下的性能,关注正在工作中的并发操作、同时工作中的线程数 连接数;

web服务器并发性!=数据库的,仅表会话存储机制数据处理能力;测web并发 任意时间有多少并发;

可扩展性

可扩展性:给系统增加一倍工作,理性情况下能获得两部的结果;给系统增一倍资源可或2倍吞吐量

系统业务压力可能发生变化:测可扩展性非常必要;该指标对容量规范有用:提供信息来发现应用瓶颈

尽可能收集测试需求,基于需求设计测试,忌只关注部分指标,而忽略其他指标

2.3方法

要尽可能接近真实应用的情况:

使用全集、数据分布特点、真实分布参数、是否多用户、匹配用户行为、多类型、检查错误日志、系统预热:重启后多长时间才达到正常性能容量、持续一定时间;

2.3.1设计、规范

提出问题、目标明确

标准的基准测试:合适的方案 TPC-H OLTP

专用的测试:复杂、迭代,获易还原的生产数据集快照

计划: 参数、结果文档化、测试详细记录

2.3.2时间

基准测试应运行足够长的时间,无法确认时间可一直运行,持续观察知道确认系统已稳定

一个简单的测试规则:等系统看起来稳定的时间至少=系统预热的时间

2.3.3获取系统性能和状态

尽量多地收集被测系统的信息

best建目录、每执行一轮测试创建单独子目录,将结果、配置文件、测试指标、脚本和其他相关说明保存其中

需要记录是数据:

系统状态、性能指标:CPU使用率 、磁盘I/O、网络流量统计、SHOWGLOBAL STATUS计数器

合理的间隔,记录开始时间、利用时间戳、只是收集就好

2.3.4获取准确的结果

回答些问题:

是否选择了正确的基准测试?是否为问题收集了数据?预热时间是否足够长?

是否采用了错误的测试标准:IO密集型引用采用CPU密集型测试标准来评估性能?

测试结果是否可重复?重测前确保系统状态一致;对症测

影响因素:

外部压力、性能分析、监控系统、详细日志、周期性作业

注意:

过程中所需资源是专来测试的;测试中尽量少修改参数、通过迭代逐步修改基准测试的参数;认真研究过程中的异常情况并找到原因

2.3.5运行测试分析结果

自动化:减少人为失误,Makefile文件、脚本

测试结果满足目前需求,简单运行几轮测试,看看结果就OK了,如结果变化很大,可多运行几次、或更长时间

结果:

分析,将数字变成知识,最终的目的是回答在设计时的问题

如何抽象有意义的结果,依赖于如何收集数据,写脚本分析数据、减少人为失误、工作量、可重复、文档化

2.3.6绘图重要性

一张图胜过千言万语嘛,本来有些知识点宝宝是想画导图的,但是么有画

书中有这么一个语句,分享一下:SHOW FULL PROCESSLIST SHOW PROCESSLIST显示哪些线程正在运行,您也可以使用mysqladmin processlist语句得到此信息,如果您有SUPER权限,您可以看到所有线程,否则,您只能看到您自己的线程,不使用FULL关键词,则只显示每个查询的前100个字符【源】

2.4基准测试工具

集成测试工具:整个应用

1、ab是Apache HTTP,每秒最多可处理多少请求【参考】【2】

2、http_load:ab类似更灵活,被设计为对web服务器测试,通过一个输入文件提供多个URL,随机选择进行测试,也可定制,使其按照时间比率进行测试【参考】

3、JMeter,java程序,可加载其他应用并测试其性能,这个听不错的,上面两个没有接触过,不评论

单组件式:测MySQL,基于MySQL的系统性能

1、mysqlslap:mysql5.1后自带,模拟服务器的负载,输出计时信息,可执行并发连接数、指定sql语句,否则自动生成select语句【参考】

2、MySQL Benchmark Suite(sql-bench):自带、5.7拿掉,基准测试套件,用于不同数据库服务器上进行比较测试,单线程串行执行,测执行查询的速度;包含了大量预定义测试,易使用,轻松比较不同引擎或配置的性能测试,CPU密集型的,结果会显示哪些类型的操作在服务器上执行更快,缺点:测试数据集小且无法用指定的数据,需要perl BDB支持;【参考】

3、Super Smack:MySQL、PostgreSQL,提供压力测试和负载均衡,复杂而强大的工具,可模拟多用户访问,加载测试数据到库、随机数据填充测试表【参考】

4、Database Test Suite:类似某些工业标准测试的工具集,免费TPC-C OLTP测试工具

5、sysbench:多线程系统压测,据影响数据库服务器性能的因素评估系统的性能,全能测试工具,支持MySQL、操作系统、硬件的硬件测试【参考】【2】

MySQL的BENCHMARK()函数:测试特定操作的执行速度,参数可以是需要执行的次数或表达式(任何标量表达式)

2.5案例

此处省略n字

2.6总结

终于等到你~音乐起;建议至少要熟悉sysbench,如何使用oltp(比较不同系统性能) 和fileio 测试;经常执行基准测试,制定一些原则很必要,选择合适的测试工具、建立脚本库,收集信息分析结果,熟练一种绘图工具;

大佬都这么说了,所以你知道我的下一篇是什么了吗?

相关文章:

【MySQL数据库】第一章解读:MySQL架构与历史

【MySQL数据库】第三章解读:服务器性能剖析 (下)

以上就是【MySQL数据库】第二章解读:MySQL基准测试的详细内容,更多请关注 第一PHP社区 其它相关文章!


推荐阅读
  • PHP组合工具以及开发所需的工具
    本文介绍了PHP开发中常用的组合工具和开发所需的工具。对于数据分析软件,包括Excel、hihidata、SPSS、SAS、MARLAB、Eview以及各种BI与报表工具等。同时还介绍了PHP开发所需的PHP MySQL Apache集成环境,包括推荐的AppServ等版本。 ... [详细]
  • 本文介绍了在开发Android新闻App时,搭建本地服务器的步骤。通过使用XAMPP软件,可以一键式搭建起开发环境,包括Apache、MySQL、PHP、PERL。在本地服务器上新建数据库和表,并设置相应的属性。最后,给出了创建new表的SQL语句。这个教程适合初学者参考。 ... [详细]
  • 本文介绍了如何使用php限制数据库插入的条数并显示每次插入数据库之间的数据数目,以及避免重复提交的方法。同时还介绍了如何限制某一个数据库用户的并发连接数,以及设置数据库的连接数和连接超时时间的方法。最后提供了一些关于浏览器在线用户数和数据库连接数量比例的参考值。 ... [详细]
  • 负载均衡_Nginx反向代理动静分离负载均衡及rewrite隐藏路径详解(Nginx Apache MySQL Redis)–第二部分
    nginx反向代理、动静分离、负载均衡及rewrite隐藏路径详解 ... [详细]
  • 基于PgpoolII的PostgreSQL集群安装与配置教程
    本文介绍了基于PgpoolII的PostgreSQL集群的安装与配置教程。Pgpool-II是一个位于PostgreSQL服务器和PostgreSQL数据库客户端之间的中间件,提供了连接池、复制、负载均衡、缓存、看门狗、限制链接等功能,可以用于搭建高可用的PostgreSQL集群。文章详细介绍了通过yum安装Pgpool-II的步骤,并提供了相关的官方参考地址。 ... [详细]
  • 本文详细介绍了SQL日志收缩的方法,包括截断日志和删除不需要的旧日志记录。通过备份日志和使用DBCC SHRINKFILE命令可以实现日志的收缩。同时,还介绍了截断日志的原理和注意事项,包括不能截断事务日志的活动部分和MinLSN的确定方法。通过本文的方法,可以有效减小逻辑日志的大小,提高数据库的性能。 ... [详细]
  • 搭建Windows Server 2012 R2 IIS8.5+PHP(FastCGI)+MySQL环境的详细步骤
    本文详细介绍了搭建Windows Server 2012 R2 IIS8.5+PHP(FastCGI)+MySQL环境的步骤,包括环境说明、相关软件下载的地址以及所需的插件下载地址。 ... [详细]
  • 本文介绍了在Mac上搭建php环境后无法使用localhost连接mysql的问题,并通过将localhost替换为127.0.0.1或本机IP解决了该问题。文章解释了localhost和127.0.0.1的区别,指出了使用socket方式连接导致连接失败的原因。此外,还提供了相关链接供读者深入了解。 ... [详细]
  • 本文介绍了RPC框架Thrift的安装环境变量配置与第一个实例,讲解了RPC的概念以及如何解决跨语言、c++客户端、web服务端、远程调用等需求。Thrift开发方便上手快,性能和稳定性也不错,适合初学者学习和使用。 ... [详细]
  • 本文介绍了关于apache、phpmyadmin、mysql、php、emacs、path等知识点,以及如何搭建php环境。文章提供了详细的安装步骤和所需软件列表,希望能帮助读者解决与LAMP相关的技术问题。 ... [详细]
  • 如何提高PHP编程技能及推荐高级教程
    本文介绍了如何提高PHP编程技能的方法,推荐了一些高级教程。学习任何一种编程语言都需要长期的坚持和不懈的努力,本文提醒读者要有足够的耐心和时间投入。通过实践操作学习,可以更好地理解和掌握PHP语言的特异性,特别是单引号和双引号的用法。同时,本文也指出了只走马观花看整体而不深入学习的学习方式无法真正掌握这门语言,建议读者要从整体来考虑局部,培养大局观。最后,本文提醒读者完成一个像模像样的网站需要付出更多的努力和实践。 ... [详细]
  • LVS实现负载均衡的原理LVS负载均衡负载均衡集群是LoadBalance集群。是一种将网络上的访问流量分布于各个节点,以降低服务器压力,更好的向客户端 ... [详细]
  • [翻译]微服务设计模式5. 服务发现服务端服务发现
    服务之间需要互相调用,在单体架构中,服务之间的互相调用直接通过编程语言层面的方法调用就搞定了。在传统的分布式应用的部署中,服务地 ... [详细]
  • ZooKeeper 学习
    前言相信大家对ZooKeeper应该不算陌生。但是你真的了解ZooKeeper是个什么东西吗?如果别人面试官让你给他讲讲ZooKeeper是个什么东西, ... [详细]
  • 抖音服务器带宽有多大,才能供上亿人同时刷?
    最近看到一个有意思的提问:抖音服务器带宽有多大,为什么能够供那么多人同时刷?今天来给大家科普一下。 ... [详细]
author-avatar
mobiledu2502857177
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有