linux – 调整顺序磁盘读取以提高性能
内容导读
互联网集市收集整理的这篇技术教程文章主要介绍了linux – 调整顺序磁盘读取以提高性能,小编现在分享给大家,供广大互联网技能从业者学习和参考。文章包含1589字,纯文字阅读大概需要3分钟。
内容图文
![linux – 调整顺序磁盘读取以提高性能](/upload/InfoBanner/zyjiaocheng/957/8889fe4819454a25a7990a924ee719a9.jpg)
我正在从磁盘顺序读取一个大文件,并尝试在读取过程中理解iostat输出.
>文件大小:10 GB
>读取缓冲区:4 KB
>预读(/ sys / block / sda / queue / read_ahead_kb):128 KB
iostat输出如下
Device: rrqm/s wrqm/s r/s w/s rMB/s wMB/s avgrq-sz avgqu-sz await r_await w_await svctm %util
sda 0.00 0.00 833.00 14.00 103.88 0.05 251.30 6.07 5.69 2.33 205.71 1.18 100.00
计算I / O请求的平均大小=(rMB / s除以r / s)得到~128 KB,这是预读值.这似乎表明,当读取系统调用指定了4KB缓冲区时,实际磁盘I / O根据预读值发生.
当我将预读值增加到256KB时,iostat输出如下
Device: rrqm/s wrqm/s r/s w/s rMB/s wMB/s avgrq-sz avgqu-sz await r_await w_await svctm %util
sda 0.00 28.00 412.00 12.00 102.50 0.05 495.32 10.78 12.15 4.76 265.83 2.36 100.00
同样,平均I / O请求大小为256 KB,与预读相匹配.
这一直持续到我将512 KB设置为预读值并且当我向上移动到1024 KB的预读值时没有保持 – I / O请求的平均大小仍然是512 KB.将max_sectors_kb(每个I / O请求的最大数据量)从默认的512 KB增加到1024 KB也没有帮助.
为什么会发生这种情况 – 理想情况下,我希望尽可能地减少读取的IOPS,并且每个I / O请求读取大量数据(每个请求大于512 KB).此外,我在所有情况下都达到了100%的磁盘利用率 – 我想要限制自己读取50-60%的磁盘利用率和良好的顺序吞吐量.简而言之,顺序读取I / O的优化应用程序/内核设置是什么.
解决方法:
您可能受到/ dev / sda的max_sectors_kb设置的限制.
cat /sys/block/sda/queue/max_sectors_kb
几乎肯定会返回512.
您应该可以将其更改为1024,例如:
echo 1024 > /sys/block/sda/queue/max_sectors_kb
假设您没有遇到另一个限制,那么您应该看到1024 KB的IO大小.
内容总结
以上是互联网集市为您收集整理的linux – 调整顺序磁盘读取以提高性能全部内容,希望文章能够帮你解决linux – 调整顺序磁盘读取以提高性能所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错,欢迎将互联网集市网站推荐给程序员好友。
内容备注
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 gblab@vip.qq.com 举报,一经查实,本站将立刻删除。
内容手机端
扫描二维码推送至手机访问。