一、BCC简介 1、BCC简介 BCC是一个Python库，简化了eBPF应用的开发过程，并收集了大量性能分析相关的eBPF应用。BCC为BPF开发提供了不同的前端支持，包括Python和Lua，实现了map创建、代码编译、解析、注入等操作，使开发人员只需聚焦于用C语言开发要注入的内核代码。 BCC工具集大部分工具需要Linux Kernel 4.1以上版本支持，完整工具支持需要Linux Kernel 4.15以上版本支持。GitHub：https://github.com/iovisor/bcc 2、BCC安装 yu...
Linux常用命令之性能优化 一、性能优化是什么？ 性能优化是发挥机器本来的性能。 二、性能优化的几个常用维度 2.1 CPU命令：top1.若CPU负载高如何定位： A. top命令找到CPU利用高的进程(原理：方法是由线程执行的，线程是在进程下的，找到进程下cpu最高的线程就能定位到方法)B.Shift + H 切换到线程模型 找到线程执行cpu高的线程号C. jstack pid > p.txt 用 jstack 导出线程的 dump (记住这个问题有时候没有那么明显 一直 cpu100%，...
CPU 2.负载均衡 watch -d 高亮 uptime : 平均负载(平均活跃进程数) 查看cpu数量(注意逻辑cpu，物理cpu区别)grep ‘model name’ /proc/cpuinfo wc -llscpu linux压力测试: stress –cpu 1 (升级版: stress-ng) 性能监测: sysstat(包)mpstat -P ALL 5 多核cpu监测pidstat -u 5 1 进程监测CPU上下文切换1 CPU上下文包括： CPU寄存器 程序计数器 上下文切换包括: 进程上下文切换 系统调用(进程内而非不同进程的切换)，也叫特权模式切...
平均负载？ 平均负载是指单位时间内，系统处于可运行状态和不可中断状态的平均进程数，也就是平均活跃进程数，它和 CPU 使用率并没有直接关系。这里我先解释下，可运行状态和不可中断状态这俩词儿。 所谓可运行状态的进程，是指正在使用 CPU 或者正在等待 CPU 的进程，也就是我们常用 ps 命令看到的，处于 R 状态（Running 或 Runnable）的进程。 不可中断状态的进程则是正处于内核态关键流程中的进程，并且这些流程是不可打断的，...
系统监控 监控系统，要涵盖系统的整体资源使用情况，比如 CPU、内存、磁盘和文件系统、网络等各种系统资源。 监控应用程序，要涵盖应用程序内部的运行状态，比如 进程的 CPU、磁盘 I/O 等整体运行状况、接口调用耗时、执行过程中的错误、内部对象的内存使用等应用程序内部的运行状况。 性能监控的 USE（Utilization Saturation and Errors）法，把系统资源的性能指标简化为三个类别： （1）使用率，表示资源用于服务的时间或容量百...
培训目标： 使培训人员基本掌握Unix和Linux平台使用以及程序开发。包括：Linux和Unix系统基础知识及操作； Linux和Unix系统软件开发； 跨平台软件开发 培训内容：进入嵌入式Linux的精彩世界Linux的特点、版本演进与发展方向 嵌入式Linux系统组成 开发环境构建安装设置ARM工具链 安装设置NFS、SSH、TFTP服务GNU工具链和GDB调试嵌入式Linux构建与启动过程分析文件系统组成 Busybox编译与配置 加入C库 Linux启动过程Bootloader 内核启...
性能测试的核心，就是找出性能瓶颈并进行性能优化，解决“慢”的问题，最终满足客户业务需求。 【性能需求来源及性能问题现象】 性能需求的来源，主要分为以下几类：项目组提出性能需求；生产监控，发现有性能问题的请求；客户反馈； 客户角度性能问题的反馈现象，大概可以分为：整个系统都很慢；仅仅某个功能慢，其它不慢；系统升级前不慢，升级后慢；不是每时每刻都慢，是几种在一段时间，或者一个特定的场景下，比如搞秒杀活动或...
参考：极客时间：linux性能优化实战 一、平均负载 使用top或者uptime命令来查看系统的负载情况% uptime6:55 up 68 days, 14:59, 3 users, load averages: 4.55 2.38 2.01当前时间 运行时长 用户数 平均负载 1分钟 5分钟 15分钟可以使用man uptime来查看具体定义： The uptime utility displays the current time, the length of time the system has been up, the number of users, and the load average ...
目录性能优化分析系统瓶颈 分析内存瓶颈 分析IO瓶颈 分析进程调用 优化程序代码gprof使用步骤其它工具
原文转自： 作者：Blue_Eye https://www.jianshu.com/p/2b6658ad59b3Linux性能分析概要 1. 性能指标linux性能指标.png 随着应用负载的增加，系统资源的使用也会升高，甚至达到极限。而性能问题的本质，就是系统资源已经达到瓶颈，但请求的处理却还不够快，无法支撑更多的请求。性能分析，其实就是找出应用或系统的瓶颈，并设法去避免或者缓解它们，从而更高效地利用系统资源处理更多的请求。这包含了一系列步骤，比如：选择指标评...
Update date 2020-01-03 //开启本地mrset hive.exec.mode.local.auto=true; //设置local mr的最大输入数据量，当输入数据量小于这个值时采用local mr的方式，默认为134217728，即128Mset hive.exec.mode.local.auto.inputbytes.max=50000000;//设置local mr的最大输入文件个数，当输入文件个数小于这个值时采用local mr的方式，默认为4set hive.exec.mode.local.auto.input.files.max=10;// 开启任务并行执行set hive.exec.paral...
一、上节回顾 专栏更新至今，四大基础模块的最后一个模块——网络篇，我们就已经学完了。很开心你还没有掉队，仍然在积极学习思考和实践操作，热情地留言和互动。还有不少同学分享了在实际生产环境中，碰到各种性能问题的分析思路和优化方法，这里也谢谢你们。 今天是性能优化答疑的第五期。照例，我从网络模块的留言中，摘出了一些典型问题，作为今天的答疑内容，集中回复。同样的，为了便于你学习理解，它们并不是严格按照文章顺...
一、上节回顾 上一节，我们学习了 DNS 性能问题的分析和优化方法。简单回顾一下，DNS 可以提供域名和 IP 地址的映射关系，也是一种常用的全局负载均衡（GSLB）实现方法。 通常，需要暴露到公网的服务，都会绑定一个域名，既方便了人们记忆，也避免了后台服务 IP 地址的变更影响到用户。 不过要注意，DNS 解析受到各种网络状况的影响，性能可能不稳定。比如公网延迟增大，缓存过期导致要重新去上游服务器请求，或者流量高峰时 DNS 服...
一、上节回顾 上一节，我带你学习了 Linux 网络的基础原理。简单回顾一下，Linux 网络根据 TCP/IP模型，构建其网络协议栈。TCP/IP 模型由应用层、传输层、网络层、网络接口层等四层组成，这也是 Linux 网络栈最核心的构成部分。 应用程序通过套接字接口发送数据包时，先要在网络协议栈中从上到下逐层处理，然后才最终送到网卡发送出去；而接收数据包时，也要先经过网络栈从下到上的逐层处理，最后送到应用程序。 了解 Linux 网络的...