热门标签 | HotTags
当前位置:  开发笔记 > 运维 > 正文

使用并发I/O改进DB2数据库性能

并发IO是UNIX和Linux平台中引入的一项功能,主要用在关系数据库系统中。本文将介绍UNIXLinux文件系统中可使用的IO机制之间的区别,以及如何在IBMDB2环境中利用并发IO技术来改进数据库性能。

并发 I/O 是 UNIX 和 Linux 平台中引入的一项功能,主要用在关系数据库系统中。本文将介绍 UNIX/Linux 文件系统中可使用的 I/O 机制之间的区别,以及如何在 IBM DB2 环境中利用并发 I/O 技术来改进数据库性能。

并发 I/O 和缓存 I/O 是两个与文件系统相关联的功能。出于此原因,大部分 DB2 DBA 认为这两种技术的使用取决于存储和系统管理员的见识。然而,在 DB2 环境中利用此技术是 DBA 的职责。事实上,IBM 的 DB2 专家推荐在级别实现此技术,因为这使 DB2 Database Manager 能够控制,应该使用 O_CIO 标志打开哪些文件和不应该打开哪些文件。

本文将介绍并发和缓存 I/O 的概念,重点介绍二者之间的重要区别。更重要的是,它将介绍如何在 DB2 数据库环境中利用并发 I/O 技术改善 CPU 和内存利用率。

本文将介绍的主要主题如下:

  • 缓存 I/O 以及它对 DB2 的影响:缓存 I/O 在应用程序向操作系统发出请求时如何工作,以及这对 DB2 等关系型 DBMS 有何影响。
  • 并发 I/O (CIO) 以及它与 DB2 的关系:并发 I/O 的工作原理、直接 I/O 与并发 I/O 之间的区别、CIO 和原始设备之间的性能类似性,以及这些性能对 DB2 有何益处。
  • 如何实现 CIO:与 DB2 相关的实现方面、该实现的简单性,以及使用它的适合时机。
  • 使用 CIO(限制与局限):无法或不应使用 CIO 的场景。
  • 各种能从 CIO 获益的应用程序,以及真实世界中的使用示例。

什么是缓存 I/O?

当应用程序发出一个访问磁盘中的数据的请求时,操作系统可通过两种方式处理该请求:一种是直接从磁盘检索该数据,另一种是利用一个缓存区域,以便保留经常访问的数据以供快速访问。对每个请求执行物理 I/O 会影响性能,而在内存中拥有一个缓存经常访问的数据的缓冲区可改进数据检索过程。

文件缓冲区缓存的用途是通过将经常访问的数据放在主要内存中,最小化物理磁盘 I/O 的频率。结果是,在缓存命中比率很高时,文件缓冲区缓存的使用可非常有效地减少磁盘 I/O。这种数据检索方法常常称为缓存 I/O。当应用程序向操作系统发出一个读取请求时,操作系统首先在文件缓冲区缓存中查找需要的数据。如果在这里找到该数据,就会从缓存获取并写入应用程序缓冲区,无需进入磁盘。然而,如果请求的数据未在文件系统缓存中,操作系统必须从磁盘获取数据,并将它存储在文件系统缓存中,之后再将它传输到应用程序缓冲区。

图 1 显示了将 I/O 缓存用于数据读取操作的步骤。

  1. 应用程序发出一个读取请求。
  2. 操作系统在文件缓冲区中查找请求的数据。
  3. 请求的数据未在文件缓冲区缓存中。
  4. 操作系统从磁盘读取数据。
  5. 读取的数据缓存在文件缓冲区缓存中。
  6. 读取的数据从文件缓冲区缓存复制到应用程序缓存。

图 1. 如何将 I/O 缓存用于数据读取操作

缓存 I/O 的另一个优势是,操作系统可利用异步文件写入。换句话说,应用程序不需要等待一个写入操作完成,即可继续执行。与读取一样,缓存 I/O 尝试将要写入的数据缓存在文件系统缓冲区中,以改进未来的数据读取和最大程度地减少向磁盘写入的操作。因此,对于读取和写入请求,缓存 I/O 支持先读取,后写入,这在缓存命中率很高时有助于改善性能。

图 2 显示了将 I/O 缓存用于数据写入操作的以下步骤。

  1. 应用程序发出一个写入请求。
  2. 操作系统将数据从应用程序缓冲区复制到文件缓冲区缓存。
  3. 应用程序继续执行,无需等待磁盘写入。
  4. 同步守护进程发起对脏文件缓冲区缓存页面的定期刷新。
  5. 将脏页面写入磁盘。

图 2. I/O 缓存如何用于数据写入操作

尽管数据缓存很适合大部分应用程序,但它是冗余的,对大部分 DB2 数据库部署常常没有必要。这是因为 DB2 拥有自己的缓存区域(表现为一个或多个缓冲池的形式),并且对于它的大部分操作,DB2 使用此缓存区域来存储被访问的数据。所以除了 DB2 缓冲池,文件系统缓存的使用实际增加了 CPU 和内存开销。系统内存的很大一部分常常被用于文件缓冲区缓存,将数据复制到文件系统缓存和从文件系统缓存复制到缓冲池会消耗更多的 CPU 资源。

对于具有缓存 I/O 的写入请求,操作系统会使用所谓的 Inode 锁定机制来执行写入序列化,以始终保持数据的完整性。结果是,当将缓存 I/O 用于 DB2 时,会引入另一种形式的开销,因为 DB2 依靠它自己的锁定机制来维护数据一致性和完整性。

推荐阅读
  • Nginx使用AWStats日志分析的步骤及注意事项
    本文介绍了在Centos7操作系统上使用Nginx和AWStats进行日志分析的步骤和注意事项。通过AWStats可以统计网站的访问量、IP地址、操作系统、浏览器等信息,并提供精确到每月、每日、每小时的数据。在部署AWStats之前需要确认服务器上已经安装了Perl环境,并进行DNS解析。 ... [详细]
  • Linuxchmod目录权限命令图文详解在Linux文件系统模型中,每个文件都有一组9个权限位用来控制谁能够读写和执行该文件的内容。对于目录来说,执行位的作用是控制能否进入或者通过 ... [详细]
  • 近年来,大数据成为互联网世界的新宠儿,被列入阿里巴巴、谷歌等公司的战略规划中,也在政府报告中频繁提及。据《大数据人才报告》显示,目前全国大数据人才仅46万,未来3-5年将出现高达150万的人才缺口。根据领英报告,数据剖析人才供应指数最低,且跳槽速度最快。中国商业结合会数据剖析专业委员会统计显示,未来中国基础性数据剖析人才缺口将高达1400万。目前BAT企业中,60%以上的招聘职位都是针对大数据人才的。 ... [详细]
  • 本文介绍了数据库的存储结构及其重要性,强调了关系数据库范例中将逻辑存储与物理存储分开的必要性。通过逻辑结构和物理结构的分离,可以实现对物理存储的重新组织和数据库的迁移,而应用程序不会察觉到任何更改。文章还展示了Oracle数据库的逻辑结构和物理结构,并介绍了表空间的概念和作用。 ... [详细]
  • Linux重启网络命令实例及关机和重启示例教程
    本文介绍了Linux系统中重启网络命令的实例,以及使用不同方式关机和重启系统的示例教程。包括使用图形界面和控制台访问系统的方法,以及使用shutdown命令进行系统关机和重启的句法和用法。 ... [详细]
  • 本文主要讨论了在xps15上安装双系统win10和MacOS后,win10无法正常更新的问题。分析了可能的引导问题,并提供了解决方法。 ... [详细]
  • Centos7.6安装Gitlab教程及注意事项
    本文介绍了在Centos7.6系统下安装Gitlab的详细教程,并提供了一些注意事项。教程包括查看系统版本、安装必要的软件包、配置防火墙等步骤。同时,还强调了使用阿里云服务器时的特殊配置需求,以及建议至少4GB的可用RAM来运行GitLab。 ... [详细]
  • 本文介绍了在Hibernate配置lazy=false时无法加载数据的问题,通过采用OpenSessionInView模式和修改数据库服务器版本解决了该问题。详细描述了问题的出现和解决过程,包括运行环境和数据库的配置信息。 ... [详细]
  • 树莓派Linux基础(一):查看文件系统的命令行操作
    本文介绍了在树莓派上通过SSH服务使用命令行查看文件系统的操作,包括cd命令用于变更目录、pwd命令用于显示当前目录位置、ls命令用于显示文件和目录列表。详细讲解了这些命令的使用方法和注意事项。 ... [详细]
  • Metasploit攻击渗透实践
    本文介绍了Metasploit攻击渗透实践的内容和要求,包括主动攻击、针对浏览器和客户端的攻击,以及成功应用辅助模块的实践过程。其中涉及使用Hydra在不知道密码的情况下攻击metsploit2靶机获取密码,以及攻击浏览器中的tomcat服务的具体步骤。同时还讲解了爆破密码的方法和设置攻击目标主机的相关参数。 ... [详细]
  • Python语法上的区别及注意事项
    本文介绍了Python2x和Python3x在语法上的区别,包括print语句的变化、除法运算结果的不同、raw_input函数的替代、class写法的变化等。同时还介绍了Python脚本的解释程序的指定方法,以及在不同版本的Python中如何执行脚本。对于想要学习Python的人来说,本文提供了一些注意事项和技巧。 ... [详细]
  • 本文介绍了Oracle数据库中tnsnames.ora文件的作用和配置方法。tnsnames.ora文件在数据库启动过程中会被读取,用于解析LOCAL_LISTENER,并且与侦听无关。文章还提供了配置LOCAL_LISTENER和1522端口的示例,并展示了listener.ora文件的内容。 ... [详细]
  • 本文详细介绍了Linux中进程控制块PCBtask_struct结构体的结构和作用,包括进程状态、进程号、待处理信号、进程地址空间、调度标志、锁深度、基本时间片、调度策略以及内存管理信息等方面的内容。阅读本文可以更加深入地了解Linux进程管理的原理和机制。 ... [详细]
  • 图解redis的持久化存储机制RDB和AOF的原理和优缺点
    本文通过图解的方式介绍了redis的持久化存储机制RDB和AOF的原理和优缺点。RDB是将redis内存中的数据保存为快照文件,恢复速度较快但不支持拉链式快照。AOF是将操作日志保存到磁盘,实时存储数据但恢复速度较慢。文章详细分析了两种机制的优缺点,帮助读者更好地理解redis的持久化存储策略。 ... [详细]
  • 本文介绍了在Linux下安装Perl的步骤,并提供了一个简单的Perl程序示例。同时,还展示了运行该程序的结果。 ... [详细]
author-avatar
回忆的沙漏2502890423
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有