当前位置：首页 > 编程日记 > 正文

pprof搭配ceph tell命令分析ceph内存

编程日记 2024-05-02 21:30:00

文章目录

- - - 安装
    - 使用
    - - 使用`ceph tell`产生堆栈信息文
      - 使用`pprof`工具分析内存及`ceph tell`释放内存
      - 火焰图`FlameGraph`可视化进程堆栈信息

pprof是一个google开发的支持可视化、且可分析profile文件而达到对内存的分析。并且能够输出文本和图像来支持分析过程,pprof源码

安装

可以直接通过gperftools工具集来安装pprop工具

配置海康yum源，然后执行：

yum install gperftools

yum install gperftools-devel

使用

该分析过程同样适用于其他二进制文件

使用`ceph tell`产生堆栈信息文

启动Ceph默认的内存分析器
ceph tell mon.node1 heap start_profiler
打印内存分析器收集到的堆栈占用数据
ceph tell mon.node1 heap stats
将统计信息导出到文件
ceph tell mon.node1 heap dump
默认导出到/var/log/ceph/mon.node1.profile.0001.heap

使用`pprof`工具分析内存及`ceph tell`释放内存

分析一个文件：
pprof --text /usr/bin/ceph-mon /var/log/ceph/mon.node1.profile.0001.heap

产生如下输出：

(pprof) top10
Total: 2525 samples
298  11.8%  11.8%	 345  13.7% runtime.mapaccess1_fast64
268  10.6%  22.4%	2124  84.1% main.FindLoops
251   9.9%  32.4%	 451  17.9% scanblock
178   7.0%  39.4%	 351  13.9% hash_insert
131   5.2%  44.6%	 158   6.3% sweepspan
119   4.7%  49.3%	 350  13.9% main.DFS96   3.8%  53.1%	  98   3.9% flushptrbuf95   3.8%  56.9%	  95   3.8% runtime.aeshash6495   3.8%  60.6%	 101   4.0% runtime.settype_flush88   3.5%  64.1%	 988  39.1% runtime.mallocgc

各个参数含义如下：

The first column contains the direct memory use in MB. 函数本身使用的内存
The fourth column contains memory use by the procedure and all of its callees.函数本身内存+调用函数内存
The second and fifth columns are just percentage representations of the numbers in the first and fourth columns. 第二第五列分别为第一列，第四列与total的比值
The third column is a cumulative sum of the second column.第三列为（到当前行数为止）第二列所有的和
对比堆文件：
pprof --text --base /var/log/ceph/mon.node1.profile.0001.heap /usr/bin/ceph-mon /var/log/ceph/mon.node1.profile.0003.heap
释放已经被tcmalloc占用但是没有被ceph占用的内存
ceph tell osd.0 heap release
一旦完成停止分析器
ceph tell osd.0 heap stop_profiler

火焰图`FlameGraph`可视化进程堆栈信息

安装
下载FlameGraph到自己设备
进入该目录下获取当前进程堆栈信息 perf工具
perf record -F 99 -p 181 -g --sleep 60
perf record表示采集系统事件，没有使用-e指定，则默认采集(cpu clock周期)，-F 99表示每秒99次，-p 181表示针对当前进程进行分析，-g表示记录调用栈，--sleep 60表示收集60秒的信息
对生成的信息进行解析
perf script > out.perf
对解析出来的符号进行折叠
进入FlamGraph目录，增加以下文件的运行权限
./stackcollapse-perf.pl out.perf > out.folded
生成火焰图
同样要增加该文件的运行权限，生成如下文件
./flamegraph.pl out.folded > kernel.svg

https://www.dkcj.cn/info/5560.html

android jar 电子书下载,【Android】Gradle project sync jar包长时间下载不下来的解决办法...

当我们新建一个Android项目，或者在项目中依赖使用一个新的第三方库时，Android Studio经常会从jcenter或者maven仓库下载jar包，但是我们的网络环境不一定一直那么的顺畅，当网络环境不好，导致有时候jar包好长时间下载不下…

编程日记2024/05/02 21:00:00

TextField输入结束后让键盘消失的两个技巧

一、点击Return键消失需要调用Did End On Exit事件。- (IBAction) doneEditing:(id) sender { [sender resignFirstResponder];} 当你输入结束后点击Return键，启动Did End On Exit事件。resignFirstResponder会撤消UITextField的第一响应状态。意味着你…

编程日记2024/05/02 20:30:00

机器学习决策树 ID3

构造决策树时需要解决的第一个问题是：当前数据集中哪个特征在划分数据分类时起决定性作用。划分数据集的原则：将无序的数据变得更加有序信息增益：在划分数据集前后信息发生的变化获得信息增益最大的特征就是最好的特征熵：信息…

编程日记2024/05/02 20:00:00

centos6.5原生系统修改ceph-mon 的ELF来让其加载低版本glibc库函数

文章目录Step 1:glibc-2.17 被libc.so.6库依赖，升级glibc库Step2:升级编译器-->4.8.2可以正常编译glibc2.17Step3:修改ELF，降低ceph-mon依赖的库函数版本解决ceph-mon调用高版本libc库（修改动态库链接表ELF）Step 1:glibc-2.17 …

编程日记2024/05/02 19:30:00

如何创建一个基础jQuery插件

如何创建一个基础插件 How to Create a Basic Plugin 有时你想使一块功能性的代码在你代码的任何地方有效.比如,也许你想调用jQuery对象的一个方法,对该对象进行一系列的操作.可能你写了一个真正有用的实用函数,想它能够轻易的移植到其他项目.在这种情况下,你可能想写一个插件.…

编程日记2024/05/02 19:00:00

rk3399在linux机上烧写img,烧写固件 — TB-96AI documentation

Window主机烧写固件1、安装Windows PC端USB驱动(首次烧写执行)。2、双击DriverAssitant_v4.5DriverInstall.exe打开安装程序，点击“驱动安装”按提示安装驱动即可，安装界面如下所示:3、Type-C线连接主机端的USB接口和RK3399Pro TB-96AI开发板的Type-C接口…

编程日记2024/05/02 18:30:00

Eclipse,Mycclipse自动补全快捷键设置

为什么80%的码农都做不了架构师？>>> eclipse3.3及以后的版本中中把内容助手(content assist)的快捷键由 alt /改成了ctrl space，这又刚好跟我们操作系统的切换输入法的快捷键冲突，所以造成内容助手不能使用了，给写代…

编程日记2024/05/02 18:00:00

php 无限极分类

无限极分类1： 1 public function judeg($id)2 {3 $rs Db::name(finance_class) -> field(parent_code) -> where(id,$id) -> select();4 $i 1;5 foreach($rs as $k > $v){6 if($v[parent_code] <> 0){7 $i $this -…

编程日记2024/05/02 17:30:00

ceph-bluestore-tool基本使用

主要是在bluestore的实例上执行低级管理操作的使用程序,是ceph bluestore的管理工具命令 help显示帮助信息fsck [--deep]对bluestore元数据进行一致性检查。如果指定了–deep,还要读取所有对象数据并验证校验和repair运行一致性检查并修复我们可以发生的任何错误bluefs-expo…

编程日记2024/05/02 17:00:00

android {compileSdkVersion 23buildToolsVersion “23.0.1”defaultConfig {applicationId “com.example.checkyourtargetsdk"minSdkVersion 15targetSdkVersion 23versionCode 1versionName “1.0”}以上是Android工程里名称为app的module的build.gradle文件其中的内容…

编程日记2024/05/02 16:30:00

HDOJ 1060 Leftmost Digit

Author Ignatius.L题目大意：1.第一行输入一个整数T代表接下来有T组测试数据。2.接下来的T行，每行输入一个整数（1<N<1,000,000,000）。3.输出结果为N^N（N的N次方）最左边的那一位数（即最高位…

编程日记2024/05/02 16:00:00

WPF-002 下拉列表的简单实现

最近在一个WPF项目中用到一个下拉列表，随着用户输入字符而进行显示，使用了绑定等知识，虽然实现比较简单，可是在性能上也是想了很多办法终于才勉强可以用，与大家分享下。用于页面绑定的模型类： public clas…

编程日记2024/05/02 15:30:00

洛谷:P3950 部落冲突

原题地址:https://www.luogu.org/problemnew/show/P3950 题目简述给定一棵树，每次给定一个操作，有如下两种： 将某条边染黑 2.询问给定的u,v两点间是否有边被染黑思路询问两点间是否有边被染黑只需要在求LCA时判一下就行。所以直接上树链剖分…

编程日记2024/05/02 15:00:00

深入理解ceph-disk prepare 源码逻辑

文章目录CEPH-DISK代码逻辑DEF MAIN:DEF PARSE_ARGS:DEF Prepare.set_subparser(subparsers)def _prepare(self):PrepareBluestore的_prepare函数def prepare(self, *to_prepare_list):PrepareData类中的prepare函数def prepare_device(self, *to_prepare_list): #prepare_devi…

编程日记2024/05/02 14:30:00

Deep Learning 学习随记（三）续 Softmax regression练习

上一篇讲的Softmax regression，当时时间不够，没把练习做完。这几天学车有点累，又特别想动动手自己写写matlab代码所以等到了现在，这篇文章就当做上一篇的续吧。回顾： 上一篇最后给出了softmax regression的代价函数和…

编程日记2024/05/02 14:00:00

html画三个重叠的矩形,html5 实现两个矩形的叠加

Canvas Primer - Example: Drawing shadowswindow.addEventListener(load, function () {//得到canvas，并检测是否支持canvasvar elem document.getElementById(myCanvas);if (!elem || !elem.getContext) {return;}// 得到可以画图的上下文contextvar context el…

编程日记2024/05/02 13:30:00

sqlplusw下登录sys账户

今天使用sqlplusw时，发现每次使用sys用户登录时总是报错，提示要以sysdba或者sysoper的身份登录，错误提示如下图所示：可是界面上没地方可以输入角色的地方呀，后经尝试发现，在口令输入框里首先输入密码&#…

编程日记2024/05/02 13:00:00

mybatis =或这个=提示错误Tag name expecte问题解决

解决方案： 1、将<号或者>号进行转义 DATE_SUB(CURDATE(), INTERVAL 31 DAY) < DATE(created) 2、使用<![CDATA[ ]]>符号进行说明 <![CDATA[DATE_SUB(CURDATE(), INTERVAL 31 DAY) < DATE(created)]]> 附： 附录：常见…

编程日记2024/05/02 12:30:00

s-sgdisk源码分析 “--set-alignment=value分区对齐参数”

文章目录边界对齐子命令使用源码分析sgdisk.cc main函数入口gptcl.cc DoOptions解析并执行具体命令函数gpt.cc CreatePartition创建分区函数，设置起始扇区对齐gpt.cc Align分区对齐函数，设置起始扇区对齐sgdisk命令是由 gdisk-0.8.6-4.el7.x86_64程序包安…

编程日记2024/05/02 12:00:00

NuGet学习笔记(3) 搭建属于自己的NuGet服务器

文章导读创建NuGetServer Web站点发布站点到IIS 添加本地站点到包包数据源在上一篇NuGet学习笔记(2) 使用图形化界面打包自己的类库中讲解了如何打包自己的类库，接下来进行最重要的一步，从零开始搭建属于自己的NuGet服务器，诚然园子里及其…

编程日记2024/05/02 11:30:00

计算机网络共享打不开,网络和共享中心打不开,共享无法访问没有权限

在Win7系统下如果别的计算机设置了共享，那么在本机设置网络发现后就可以打开网络搜索到共享计算机和共享文件了，不过一些朋友反馈win7系统网络发现无法启用的问题，下面小编整理了解决方法，大家可以参考一下哦。解决方法如下&#…

编程日记2024/05/02 11:00:00

千万不要把 bool 当成函数参数

我们有很多 Coding Style 或代码规范。但这一条可能会经常被我们所遗忘，就是我们经常会在函数的参数里使用bool参数，这会大大地降低代码的可读性。不信？我们先来看看下面的代码。当你读到下面的代码，你会觉得这个代码是什么意…

编程日记2024/05/02 10:30:00

修改ceph-disk源码，增加指定ceph.conf部署osd的功能

文章目录 ceph环境源码修改主文件：`ceph-disk/main.py`main函数入口parse_args(argv)增加子命令解析get_conf函数使`conf`生效修改所有调用get_conf函数的上级函数参数配置由于最近工作中需要优化osd部署流程，单节点并发加盘过程需要指定特定conf文件，来完成单盘db,wal分区…

编程日记2024/05/02 10:00:01

作业 3 应用分支与循环结构解决问题统计字符个数

/*统计字符，包括空格或回车，数字字符和其他字符*/#include<stdio.h> int main(void) {int digit,space,letter,other; /*定义4个变量分别存放统计结果*/ char ch;int i;digitspaceletterother0; /*置…

编程日记2024/05/02 09:00:00

php后期静态绑定

从php5.3开始，php增加了一个叫后期绑定的功能，用于在继承范围内引用静态调用的类该功能从语言内部角度考虑北命名为“后期静态绑定”；“后期绑定”意思说：static：：不再被解析为定义当前方法所在的类&#…

编程日记2024/05/02 08:30:00

pytest 9 pytest-datadir读取文件信息

安装：pip install pytest-datadir 介绍：用于操作测试数据目录和文件的插件。pytest-datadir他会寻找包含测试模块名字的文件夹或者全局的一个文件夹名字为data下的数据。比如以下的一个结构： firstdemo.py可以从test_firstdemo文件夹下的文件…

编程日记2024/05/02 08:00:00

深入理解ceph-disk activate 源码逻辑

文章目录CEPH-DISK代码逻辑Activate osd的主要逻辑如下DEF main_activate激活osd的入口函数DEF mount_activate挂载临时目录，分配osd id并初始化osdDEF activate 分配osd_id以及初始化osdCEPH-DISK代码逻辑本文在上文 :深入理解ceph-disk prepare 源码逻辑基础上描…

编程日记2024/05/02 07:30:00

simple_html_dom meta,HTML DOM Meta content 属性

HTML DOM Meta content 属性Meta 对象定义和用法content 属性可设置或者返回 meta 元素 content 属性值。content 属性指定了 meta 信息的内容。注意： 这个属性可用的值依赖于name 和httpEquiv 属性的值。语法设置 content 属性：linkObject.content"…

编程日记2024/05/02 07:00:00

struts2登录后返回登录前的页面

在Action中添加 String getUrl（）　｛ return　ServletActionContext.getRequest().getHeader("referer"); ｝ 然后配置struts的这个Action的result为：<result type"redirect">${url}</resu…

编程日记2024/05/02 06:30:00

pprof搭配ceph tell命令分析ceph内存

文章目录

安装

使用

使用`ceph tell`产生堆栈信息文

使用`pprof`工具分析内存及`ceph tell`释放内存

火焰图`FlameGraph`可视化进程堆栈信息

相关文章：

android jar 电子书下载,【Android】Gradle project sync jar包长时间下载不下来的解决办法...

TextField输入结束后让键盘消失的两个技巧

机器学习决策树 ID3

centos6.5原生系统修改ceph-mon 的ELF来让其加载低版本glibc库函数

如何创建一个基础jQuery插件

rk3399在linux机上烧写img,烧写固件 — TB-96AI documentation

Eclipse,Mycclipse自动补全快捷键设置

php 无限极分类

ceph-bluestore-tool基本使用

Android基础是什么,Android基础概念

HDOJ 1060 Leftmost Digit

WPF-002 下拉列表的简单实现

洛谷:P3950 部落冲突

深入理解ceph-disk prepare 源码逻辑

Deep Learning 学习随记（三）续 Softmax regression练习

html画三个重叠的矩形,html5 实现两个矩形的叠加

sqlplusw下登录sys账户

mybatis =或这个=提示错误Tag name expecte问题解决

s-sgdisk源码分析 “--set-alignment=value分区对齐参数”

NuGet学习笔记(3) 搭建属于自己的NuGet服务器

计算机网络共享打不开,网络和共享中心打不开,共享无法访问没有权限

千万不要把 bool 当成函数参数

修改ceph-disk源码，增加指定ceph.conf部署osd的功能

相关计算机专业的英语文献,英文文献及翻译计算机专业.doc

作业 3 应用分支与循环结构解决问题统计字符个数

php后期静态绑定

pytest 9 pytest-datadir读取文件信息

深入理解ceph-disk activate 源码逻辑

simple_html_dom meta,HTML DOM Meta content 属性

struts2登录后返回登录前的页面

文章目录

安装

使用

使用ceph tell产生堆栈信息文

使用pprof工具分析内存及ceph tell释放内存

火焰图FlameGraph可视化进程堆栈信息

相关文章：

使用`ceph tell`产生堆栈信息文

使用`pprof`工具分析内存及`ceph tell`释放内存

火焰图`FlameGraph`可视化进程堆栈信息