Linux 系统性能优化

这篇具有很好参考价值的文章主要介绍了Linux 系统性能优化。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

Linux 系统性能优化

一、影响 Linux 性能的各种因素

1、系统硬件资源

(1)CPU

如何判断多核 CPU 与超线程

消耗 CPU 的业务:动态 web 服务、mail 服务

(2)内存

  • 物理内存与 swap 的取舍

  • 选择 64 位 Linux 操作系统

消耗内存的业务:内存数据库(redis/hbase/mongodb)

(3)磁盘 IO

  • RAID 技术(RAID0/1/5/01/10)

  • SSD 磁盘

消耗磁盘的业务:数据库服务器

(4)网络带宽

  • 网卡/交换机的选择

  • 操作系统双网卡绑定

消耗带宽的业务:hadoop 平台、视频业务平台

2、操作系统相关资源

(1)系统安装优化

磁盘分区、RAID 设置、swap 设置

(2)内核参数优化

ulimit -n(最大打开文件数)

ulimit -u(最大用户数)

(3)文件系统优化

  • ext2:Linux 下标准文件系统,无日志记录(inode)功能。

  • ext3:在ext2 基础上增加了日志记录功能(inode),仅支持 32000 个子目录。

  • ex4:ext3 的后续版本,Linux2.6.28 内核开始支持。无限子目录支持,快速 fsck。

  • xfs:高性能文件系统,Linux3.10 内核开始默认支持。

建议:

读操作频繁,同时小文件众多的应用:首选 ext4 文件系统,接下来依次是 xfs、ext3

写操作频繁的应用,首选是 xfs,接下来依次是 ext4 和 ext3

对性能要求丌高、数据安全要求丌高的业务,ext3 是比较好的选择。

3、程序问题

此类问题需要开发人员查看代码,介入处理。但作为运维人员需要给出程序问题的有力证据。

 

二、Linux 性能优化工具

1、CPU 性能评估工具

(1)vmstat(系统默认自带)

利用 vmstat 命令可以对操作系统的内存信息、进程状态、CPU活劢等进行监视。

常用方式:vmstat 2 3

表示每 3 秒更新一次输出信息,统计 5 次后停止输出。

下面是 vmstat 命令在某个系统的输出结果:

Linux 系统性能优化

对上面每项的输出解释如下:

  • procs

  • r 列表示运行和等待 cpu 时间片的进程数, 这个值如果长期大于系统CPU 的个数,说明 CPU 不足,需要增加 CPU。

  • b 列表示在等待资源的进程数,比如正在等待 I/O、或者内存交换等。

  • memory

  • swpd 列表示切换到内存交换区的内存数量(以 k为单位) 。如果 swpd 的值不为0,或者比较大,只要 si、so 的值长期为 0,这种情况下一般不用担心,不会影响系统性能。

  • free列表示当前空闲的物理内存数量(以 k为单位)

  • buff 列表示 buffers cache的内存数量,一般对块设备的读写才需要缓冲。

  • cache列表示 page cached 的内存数量,一般作为文件系统 cached,频繁访问的文件都会被 cached,如果 cache 值较大,说明 cached 的文件数较多,如果此时 IO 中 bi比较小,说明文件系统效率比较好。

  • swap

  • si列表示由磁盘调入内存,也就是内存进入内存交换区的数量。

  • so 列表示由内存调入磁盘,也就是内存交换区进入内存的数量。

一般情况下, si、 so 的值都为 0, 如果 si、 so 的值长期不为 0, 则表示系统内存不足。需要增加系统内存。

  • IO 项显示磁盘读写状况

  • Bi列表示从块设备读入数据的总量(即读磁盘) (每秒 kb) 。

  • Bo 列表示写入到块设备的数据总量(即写磁盘) (每秒 kb)。

这里我们设置的 bi+bo 参考值为 1000,如果超过 1000,而且 wa值较大,则表示系统磁盘 IO 有问题,应该考虑提高磁盘的读写性能。

  • system 显示采集间隔内发生的中断数

  • in 列表示在某一时间间隔中观测到的每秒设备中断数。

  • cs 列表示每秒产生的上下文切换次数。

上面这 2 个值越大,会看到由内核消耗的 CPU 时间会越多。

  • CPU 项显示了 CPU 的使用状态,此列是我们关注的重点。

  • us 列显示了用户进程消耗的 CPU 时间百分比。us 的值比较高时,说明用户进程消耗的 cpu 时间多,但是如果长期大于 50%,就需要考虑优化程序或算法。

  • sy列显示了内核进程消耗的 CPU 时间百分比。Sy的值较高时,说明内核消耗的CPU 资源很多。

根据经验, us+sy的参考值为 80%, 如果 us+sy大于 80%说明可能存在 CPU 资源不足。

  • id 列显示了 CPU 处在空闲状态的时间百分比。

  • wa 列显示了 IO 等待所占用的 CPU 时间百分比。wa 值越高,说明 IO 等待越严重,根据经验,wa 的参考值为 20%,如果 wa 超过 20%,说明 IO 等待严重,引起 IO 等待的原因可能是磁盘大量随机读写造成的, 也可能是磁盘或者磁盘控制器的带宽瓶颈造成的(主要是块操作) 。

综上所述, 在对 CPU 的评估中, 需要重点注意的是procs 项 r 列的值和 CPU 项中 us、sy和 id 列的值。

(2)iostat(需要安装 sysstat 工具包)

iostat 是 I/O statistics(输入/输出统计)的缩写,主要的功能是对系统的磁盘 I/O 操作进行监视。

常用方式:iostat -c 3 5

其中,-c 表示显示CPU 的使用情况,-d:显示磁盘的使用情况。

(3)uptime 命令

uptime 是监控系统性能最常用的一个命令,主要用来统计系统当前的运行状况,输出的信息依次为:系统现在的时间、 系统从上次开机到现在运行了多长时间、 系统目前有多少登陆用户、系统在一分钟内、五分钟内、十五分钟内的平均负载。

2、内存性能评估

(1)free 命令

free 命令是监控 linux 内存使用状况最常用的指令

常见用法:free –m

看下面的一个输出:

Linux 系统性能优化

“free –m”表示以 M为单位查看内存使用情况,在这个输出中,我们重点关注的应该是 free 列与 cached 列的输出值,由输出可知,此系统共 8G 内存,系统空闲内存还有925M,其中,Buffer Cache 占用了 243M,Page Cache 占用了 6299M,由此可知系统缓存了很多的文件和目录,而对于应用程序来说,可以使用的内存还有 7468M,当然这个 7468M 包含了 Buffer Cache 和 Page Cache 的值。在 swap 项可以看出,交换分区还未使用。所以从应用的角度来说,此系统内存资源还非常充足。

一般有这样一个经验公式:应用程序可用内存/系统物理内存>70%时,表示系统内存资源非常充足,不影响系统性能,应用程序可用内存/系统物理内存<20%时,表示系统内存资源紧缺,需要增加系统内存,20%<应用程序可用内存/系统物理内存<70%时,表示系统内存资源基本能满足应用需求,暂时不影响系统性能。

(2)sar/pidstat

此两个命令主要用于监控全部或指定进程占用系统资源的情况,如 CPU,内存、设备IO。

三个公用参数:-u(获取 CPU 状态) 、-r(获取内存状态) 、-d(获取磁盘)

常用组合:

sar -u 3 获取 cpu 3 秒内的状态

pidstat -r –p 1 3 获取内存 3 秒内的状态

看看以上两个命令的差别?

请看下面的一个输出:

Linux 系统性能优化

其中:

Kbmemfree 表示空闲物理内存大小,kbmemused 表示已使用的物理内存空间大小,%memused 表示已使用内存占总内存大小的百分比,kbbuffers 和 kbcached 分别表示Buffer Cache 和 Page Cache 的大小,kbcommit 和%commit 分别表示应用程序当前使用的内存大小和使用百分比。

可以看出 sar 的输出其实与 free的输出完全对应,不过 sar 更加人性化,不但给出了内存使用量,还给出了内存使用的百分比以及统计的平均值。从%commit 项可知,此系统目前内存资源充足。

3、磁盘性能评估

(1)iostat –d 组合

iostat –d 2 3

通过“iostat –d”命令组合也可以查看系统磁盘的使用状况,请看如下输出:

Linux 系统性能优化

对上面每项的输出解释如下:

  • Blk_read/s 表示每秒读取的数据块数。

  • Blk_wrtn/s 表示每秒写入的数据块数。

  • Blk_read 表示读取的所有块数。

  • Blk_wrtn 表示写入的所有块数。

(2)pidstat -d -p 31887 3

(3)sar -d 2 3

通过“sar –d”组合,可以对系统的磁盘 IO 做一个基本的统计,请看下面的一个输出:

Linux 系统性能优化

对上面每项的输出解释如下:

  • DEV 表示磁盘设备名称。

  • tps 表示每秒到物理磁盘的传送数,也就是每秒的 I/O 流量。一个传送就是一个 I/O 请求,多个逻辑请求可以被合并为一个物理 I/O 请求。

  • rd_sec/s 表示每秒从设备读取的扇区数(1 扇区=512 字节)。

  • wr_sec/s 表示每秒写入设备的扇区数目。

  • avgrq-sz 表示平均每次设备 I/O 操作的数据大小(以扇区为单位) 。

  • avgqu-sz 表示平均 I/O 队列长度。

  • await 表示平均每次设备 I/O 操作的等待时间(以毫秒为单位) 。

  • svctm表示平均每次设备 I/O 操作的服务时间(以毫秒为单位) 。

  • %util表示一秒中有百分之几的时间用于 I/O 操作。

Linux 中 I/O 请求系统与现实生活中超市购物排队系统有很多类似的地方,通过对超市购物排队系统的理解,可以很快掌握 linux 中 I/O 运行机制。比如:

  • avgrq-sz 类似于超市排队中每人所买东西的多少。

  • avgqu-sz 类似于超市排队中单位时间内平均排队的人数。

  • await 类似于超市排队中每人的等待时间。

  • svctm类似于超市排队中收银员的收款速度。

  • %util类似于超市收银台前有人排队的时间比例。

对于磁盘 IO 性能,一般有如下评判标准:

正常情况下 svctm 应该是小于 await 值的,而 svctm 的大小和磁盘性能有关,CPU、内存的负荷也会对 svctm值造成影响,过多的请求也会间接的导致 svctm值的增加。

await 值的大小一般取决于 svctm 的值和 I/O 队列长度以及 I/O 请求模式,如果 svctm的值与 await 很接近,表示几乎没有 I/O 等待,磁盘性能很好,如果 await 的值远高于 svctm的值,则表示 I/O 队列等待太长,系统上运行的应用程序将变慢,此时可以通过更换更快的硬盘来解决问题。

%util 项的值也是衡量磁盘 I/O 的一个重要指标,如果%util 接近 100%,表示磁盘产生的 I/O 请求太多,I/O 系统已经满负荷的在工作,该磁盘可能存在瓶颈。长期下去,势必影响系统的性能,可以通过优化程序或者通过更换更高、更快的磁盘来解决此问题。

4、网络性能评估

(1)ping 命令

请看下面的一个输出:

Linux 系统性能优化

在这个输出中,time值显示了两台主机之间的网络延时情况,如果此值很大,则表示网络的延时很大,单位为毫秒。在这个输出的最后,是对上面输出信息的一个总结,packet loss 表示网络的丢包率,此值越小,表示网络的质量越高。

(2)netstat 命令

netstat –i (查看路由情况)

netstat –r(查看网络接口状态)

(3)mtr/traceroute 命令

跟踪网络路由状态,推荐使用 mtr,动态跟踪网络路由,用于排除网络问题非常方便。

 

三、系统性能分析标准

Linux 系统性能优化

 

作者|sunyifeng文章来源地址https://www.toymoban.com/news/detail-532372.html

到了这里,关于Linux 系统性能优化的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 【Linux系统基础快速入门详解】根据计算机硬件特性优化企业网站集群性能方案

    鱼弦:CSDN内容合伙人、CSDN新星导师、51CTO(Top红人+专家博主) 、github开源爱好者(go-zero源码二次开发、游戏后端架构 https://github.com/Peakchen) 优化企业网站集群性能是一个复杂的任务,不仅涉及硬件特性的优化,还需要考虑网络架构、负载均衡、缓存策略等多个方面。下面是

    2024年02月07日
    浏览(102)
  • linux 性能优化-内存优化

    CPU 管理一样,内存管理也是操作系统最核心的功能之一。内存主要用来存储系统和应 用程序的指令、数据、缓存等。 1.1.1.日常生活常说的内存是什么? 我的笔记本电脑内存就是 8GB 的 这个内存其实是物理内存 物理内存也称为主存,大多数计算机用的主存都是动态随机访问内

    2024年02月04日
    浏览(56)
  • Linux性能优化--性能工具:网络

    本章介绍一些在Linux上可用的网络性能工具。我们主要关注分析单个设备/系统网络流量的工具,而非全网管理工具。虽然在完全隔离的情况下评估网络性能通常是无意义的(节点不会与自己通信),但是,调查单个系统在网络上的行为对确定本地配置和应用程序的问题是有帮助的

    2024年02月07日
    浏览(62)
  • linux性能优化-IO调度优化

    Linux I/O调度器(Linux I/O Scheduler)Linux内核中的一个组成部分,用户可以通过调整这个调度器来优化系统性能,介于通用块层和块设备驱动程序之间。 noop(No Operation) :通常用于内存存储的设备。 cfq(Completely Fair Scheduler ) :完全公平调度器,进程平均使用IO带宽。 deadline :针对

    2024年02月10日
    浏览(60)
  • Linux性能优化--性能工具:特定进程内存

    本章介绍的工具使你能诊断应用程序与内存子系统之间的交互,该子系统由Linux内核和CPU管理。由于内存子系统的不同层次在性能上有数量级的差异,因此,修复应用程序使其有效地使用内存子系统会对程序性能产生巨大的影响。 阅读本章后,你将能够: 确定一个应用程序使

    2024年02月07日
    浏览(47)
  • Linux性能优化--实用工具:性能工具助手

    本章介绍一些在Linux系统上可用的实用程序,它们能够加强性能工具的有效性和可用性。实用工具本身不是性能工具,但是当它们与性能工具一起使用时,它们可以帮助完成如下功能:自动执行繁琐的任务、分析性能统计数据,以及创建性能工具友好的应用程序。 阅读本章后

    2024年02月07日
    浏览(50)
  • Linux性能优化-磁盘I/O优化

    目录 1.文件系统 1.1.文件系统工作原理  1.1.1.索引节点和目录项 1.1.2.虚拟文件系统 2.磁盘I/O工作原理 2.1.磁盘类型 2.1.1.根据介质不同分类 2.1.2.磁盘按照接口分类 2.1.3.按照使用方式分类 2.2.IO栈  3.性能指标 3.1.磁盘I/O性能指标 3.2.磁盘I/O观测  3.3.进程I/O观测 3.3.1.pidstat 观测I

    2023年04月23日
    浏览(30)
  • linux性能优化-磁盘I_O优化

    文件系统是在磁盘的基础上,提供了一个用来管理文件的树状结构。 接下来我们就看看Linux 文件系统的工作原理。 1.1.1索引节点和目录项 在 Linux 中一切皆文件 ,文件系统,本身是对存储设备上的文件,进行组织管理的机制 为了方便管理,Linux 文件系统为每个文件都分配两个数

    2024年01月24日
    浏览(36)
  • linux性能优化-内存原理

    只有内核才可以直接访问物理内存,Linux内核给每个进程都提供了一个独立的虚拟地址空间,并且这个地址空间是连续的。这样,进程通过访问虚拟内存来访问内存。 虚拟地址空间的内部又被分为内核空间和用户空间两部分,不同字长(也就是单个 CPU 指令可以处理数据的最

    2024年02月01日
    浏览(37)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包