Skip to content

天楚锐齿

人工智能 云计算 大数据 物联网 IT 通信 嵌入式

天楚锐齿

  • 下载
  • 物联网
  • 云计算
  • 大数据
  • 人工智能
  • Linux&Android
  • 网络
  • 通信
  • 嵌入式
  • 杂七杂八

使用gperftools和btrace来分析java的堆外内存泄露

2020-10-26
安装gperftools(google performance tools)来分析java的堆外(超出-Xmx所设置的heap size的部分)内存泄露
如果是堆内泄漏,则最大内存使用不会超过-Xmx所设置的大小,基本上使用jmap之类的都直接可以查到问题。
安装:
$ sudo yum -y install graphviz gv
$ sudo yum -y install gcc make
$ sudo yum -y install gcc gcc-c++
$ wget http://download.savannah.gnu.org/releases/libunwind/libunwind-1.4.0.tar.gz
$ tar -zxvf libunwind-1.4.0.tar.gz
$ ./configure
$ make
$ sudo make install
$ ll /usr/local/lib/
$ cd ..
$ wget https://github.com/gperftools/gperftools/releases/download/gperftools-2.8/gperftools-2.8.tar.gz
$ tar -zxvf  gperftools-2.8.tar.gz
$ cd gperftools-2.8
$ ./configure
$ make
$ sudo make install
$ ll /usr/local/lib/
$ ll /usr/local/bin/
$ sudo vi /etc/ld.so.conf.d/gperftools.conf
/usr/local/lib
$ sudo ldconfig
$ sudo ldconfig -p | grep libtcmalloc
$ sudo ldconfig -p | grep libunwind
使用:
perftools是通过Linux的LD_PRELOAD达到java应用程序运行时,当调用malloc时换用它的libtcmalloc.so,因此需要在运行程序之前设置变量:
$ vi /data/wildfly/bin/standalone.sh
…
export LD_PRELOAD=/usr/local/lib/libtcmalloc.so
export HEAPPROFILE=/data/wildfly/standalone/log/java      //这个必须是wildfly可读写的目录,最好就是wildfly的log目录。
在while true; do 上面增加以上两行。
…
启动Java程序之后,会按照在HEAPPROFILE定义的格式(最后一个斜杠的前面为目录,后面为文件名前缀)生成heap文件,运行如下命令,产生文本格式的报告:
$ /data/wildfly/bin/standalone.sh
另开一个shell,稍等即可查看到:
$ ll /data/wildfly/standalone/log/java*
-rw-rw-r– 1 coadmin coadmin 1048566 Oct 24 11:58 /data/wildfly/standalone/log/java.0001.heap
-rw-rw-r– 1 coadmin coadmin 1048567 Oct 24 11:59 /data/wildfly/standalone/log/java.0002.heap
-rw-rw-r– 1 coadmin coadmin 1048562 Oct 24 12:00 /data/wildfly/standalone/log/java.0003.heap
-rw-rw-r– 1 coadmin coadmin 1048561 Oct 24 12:01 /data/wildfly/standalone/log/java.0004.heap
分析:
$ pprof –text /usr/java/jdk1.8.0_112/bin/java /data/wildfly/standalone/log/java.0001.heap
Using local file /usr/java/jdk1.8.0_112/bin/java.
Using local file /data/wildfly/standalone/log/java.0008.heap.
Total: 116.4 MB
    50.3  43.2%  43.2%     50.3  43.2% os::malloc@91cb30
    45.8  39.3%  82.6%     45.8  39.3% init
    14.0  12.0%  94.6%     14.0  12.0% updatewindow
     3.1   2.6%  97.2%      3.1   2.6% inflateInit2_
     2.9   2.5%  99.7%      2.9   2.5% readCEN
     0.1   0.1%  99.8%      3.1   2.7% ZIP_Put_In_Cache0
     0.1   0.1%  99.8%      0.1   0.1% __GI__dl_allocate_tls
     0.1   0.0%  99.9%      0.1   0.0% newEntry
     0.0   0.0%  99.9%      0.0   0.0% __GI___strdup
     0.0   0.0% 100.0%      0.0   0.0% __alloc_dir
     0.0   0.0% 100.0%      3.1   2.7% Java_java_util_zip_Inflater_init
     0.0   0.0% 100.0%      0.0   0.0% _dl_new_object
     0.0   0.0% 100.0%      0.0   0.0% read_alias_file
输出一共六列的解释:
第1列: Number of profiling samples in this function
第2列: Percentage of profiling samples in this function
第3列: Percentage of profiling samples in the functions printed so far
第4列: Number of profiling samples in this function and its callees
第5列: Percentage of profiling samples in this function and its callees
第6列: Function name
    上面显示列出来的问题,因为os::malloc@91cb30是内核分配内存的函数,不是java类,是被调用的,init和updatewindow看起来也是系统底层函数,是被调用的。
inflateInit2_和readCEN和最可疑,网上查找,这两都和java.util.zip.Inflater有关。
使用BTrace定位到调用java.util.zip.Inflater代码的位置
安装:
先下载https://github.com/btraceio/btrace/releases/download/v2.0.2/btrace-2.0.2-bin.tar.gz
$ mkdir btrace
$ tar -zxvf btrace-2.0.2-bin.tar.gz -C btrace
$ export JAVA_HOME=/usr/java/jdk1.8.0_112
$ export JRE_HOME=${JAVA_HOME}/jre
$ export CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib
$ export BTRACE_HOME=/home/coadmin/btrace
$ export PATH=$PATH:${JAVA_HOME}/bin:${BTRACE_HOME}/bin
测试下:
$ btrace -h
写一个用来查找java.util.zip.Inflater类调用关系的源代码:
$ vi BtracerInflater.java
import static org.openjdk.btrace.core.BTraceUtils.*;
import org.openjdk.btrace.core.annotations.*;
import java.nio.ByteBuffer;
import java.lang.Thread;
@BTrace
public class BtracerInflater{
   @OnMethod(
      clazz=”java.util.zip.Inflater”,
      method=”/.*/”
   )
   public static void onMethod(){
      println(“Who call java.util.zip.Inflater’s methods :”);
     jstack();
   }
}
执行:
先找到需要查找的java进程:
$ ps axf | grep java
假设进程号为30810,使用如下命令定位调用关系,一旦调用了java.util.zip.Inflater的任何方法,都会打印出栈信息,主要关注<init>方法和ended方法即可:
$ btrace 30810 BtracerInflater.java
实际执行的命令是:
/usr/java/jdk1.8.0_112/bin/java -cp /home/coadmin/btrace/libs/btrace-client.jar:/usr/java/jdk1.8.0_112/lib/tools.jar:/usr/share/lib/java/dtrace.jar org.openjdk.btrace.client.Main 30810 BtracerInflater.java
1,853次阅读

Post navigation

前一篇:

Android下的socket怎么区分不同Network的

后一篇:

Android下使用pm disable命令或package-restrictions.xml配置文件来禁止某个app的使用或自启动

发表评论 取消回复

邮箱地址不会被公开。 必填项已用*标注

个人介绍

需要么,有事情这里找联系方式:关于天楚锐齿

=== 美女同欣赏,好酒共品尝 ===

微信扫描二维码赞赏该文章:

扫描二维码分享该文章:

分类目录

  • Linux&Android (79)
  • Uncategorized (1)
  • 下载 (28)
  • 云计算 (37)
  • 人工智能 (8)
  • 大数据 (24)
  • 嵌入式 (34)
  • 杂七杂八 (34)
  • 物联网 (59)
  • 网络 (23)
  • 通信 (21)

文章归档

近期文章

  • 使用Python渲染OpenGL的.obj和.mtl文件
  • 用LVGL图形库绘制二维码
  • Android使用Messenger和SharedMemory实现跨app的海量数据传输
  • CAN信号的c语言解析代码
  • QT qml下DBus的使用例子

近期评论

  • 硕发表在《使用Android的HIDL+AIDL方式编写从HAL层到APP层的程序》
  • maxshu发表在《使用Android的HIDL+AIDL方式编写从HAL层到APP层的程序》
  • Ambition发表在《使用Android的HIDL+AIDL方式编写从HAL层到APP层的程序》
  • Ambition发表在《使用Android的HIDL+AIDL方式编写从HAL层到APP层的程序》
  • maxshu发表在《Android9下用ethernet 的Tether模式来做路由器功能》

阅读量

  • 使用Android的HIDL+AIDL方式编写从HAL层到APP层的程序 - 16,808次阅读
  • 卸载深信服Ingress、SecurityDesktop客户端 - 12,079次阅读
  • 车机技术之Android Automotive - 6,661次阅读
  • 车机技术之车规级Linux-Automotive Grade Linux(AGL) - 5,866次阅读
  • Linux策略路由及iptables mangle、ip rule、ip route关系及一种Network is unreachable错误 - 5,711次阅读
  • 在Android9下用ndk编译vSomeIP和CommonAPI以及使用例子 - 5,658次阅读
  • linux下的unbound DNS服务器设置详解 - 5,601次阅读
  • linux的tee命令导致ssh客户端下的shell卡住不动 - 4,999次阅读
  • 车机技术之360°全景影像(环视)系统 - 4,897次阅读
  • libwebp(处理webp图像)的安装和使用 - 4,749次阅读

功能

  • 文章RSS
  • 评论RSS

联系方式

地址
深圳市科技园

时间
周一至周五:  9:00~12:00,14:00~18:00
周六和周日:10:00~12:00

标签

android AT命令 centos Hadoop hdfs ip ipv6 kickstart linux mapreduce mini6410 modem OAuth openstack os python socket ssh uboot 内核 协议 安装 嵌入式 性能 报表 授权 操作系统 数据 数据库 月报 模型 汽车 测试 深信服 深度学习 源代码 神经网络 统计 编译 网络 脚本 虚拟机 调制解调器 车机 金融
© 2023 天楚锐齿