经历的几天的分析,希望把自己学到的知识总结一下。
系统版本:Windows Server 2008 R2 Standard
系统类型:64bit
内存:32GB
程序:在系统上部署了solr,然后写5个线程不停的向solr查询。
问题现象:任务管理器中物理内存一直增长,最后到了99%。但是进程占用的内存加起来不到10G。
分析:
第一步:怀疑java程序内存溢出。
工具:jvisualvm与eclipse mat
jvisualvm检测是否内存溢出,如果存在内存溢出,可以用用jmap导出dump文件,再用mat分析。mat可以分析到每个类占用的内存。网上有很多mat的使用资料,大家可以自己查询。
我使用了jdk自带的jvisualvm,在jdk bin目录下jvisualvm.exe检测内存。如下图:
通过上图,发现heap会收集的,所以不存在内存溢出。为了熟悉,jmap,mat工具,我自己导出dump文件,用mat也分析了一下。
第二步:进一步分析
如果程序没有内存溢出问题,那么内存被什么占用了呢?
分析工具: RamMap与VMMap
RamMap 可以整体分析内存使用情况,VMMap可以精确到某个进程ID,他们都可以查看什么文件已经从磁盘映射到内存。
我用RAMMAP分析,发现大量的内存被Mapped File占用,点击Empty--Empty Working Sets,会释放内存,此时任务管理器内存占用下降到28%,但是内存一会又耗尽了(这里有原理,网上有资料,这种方法不可取,而且很影响系统性能)。
内存释放:
通过rammap与vmmap分析,发现系统把solr索引文件加载到内存中,我的索引文件有90G。对于这个mapped file我查了好多资料。大概就这样的:在windows server下进行大量IO操作时,为了提高性能,系统会默认把磁盘上的文件映射到内存,但是没有内存限制。如果磁盘文件太大,会导致内存耗尽,这也是windows server 2008 bug了。
如果限制这个内存上限呢?网上有两种方法:SetSystemFileCacheSize ,与安装微软提供的Microsoft Windows Dynamic Cache Service补丁,这个网上都有,也蛮简单,大家可以查询。
通过以上梁两种方法,依然没解决我的问题。所以,我打算在linux下试试,后续再补充博客。
来源:oschina
链接:https://my.oschina.net/u/2293326/blog/779688