<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
</head>
<body dir="auto">
I’ve suspected for some time that this matters in our environment, though we /do/ use GPFS. Maybe any use of local scratch (XFS, local drive) could figure in here?
<div><br>
</div>
<div>Are there any tips for how to determine easily where the extra money is coming from, for example when the user has specifically constrained application to a certain amount of memory with its own flags, or – to put another way – to prove that it’s not this
 sort of phenomenon happening?<br>
<br>
<div dir="ltr">On Jun 21, 2019, at 13:04, Christopher Samuel <<a href="mailto:chris@csamuel.org">chris@csamuel.org</a>> wrote:<br>
<br>
</div>
<blockquote type="cite">
<div dir="ltr"><span>On 6/13/19 5:27 PM, Kilian Cavalotti wrote:</span><br>
<span></span><br>
<blockquote type="cite"><span>I would take a look at the various *KmemSpace options in cgroups.conf,</span><br>
</blockquote>
<blockquote type="cite"><span>they can certainly help with this.</span><br>
</blockquote>
<span></span><br>
<span>Specifically I think you'll want:</span><br>
<span></span><br>
<span>ConstrainKmemSpace=no</span><br>
<span></span><br>
<span>to fix this.  This happens for NFS and Lustre based systems, I don't think it's a problem for GPFS as mmfsd has its own pagepool separate to the processes address space.</span><br>
<span></span><br>
<span>All the best,</span><br>
<span>Chris</span><br>
<span>-- </span><br>
<span> Chris Samuel  :  <a href="http://www.csamuel.org/">http://www.csamuel.org/</a>  :  Berkeley, CA, USA</span><br>
</div>
</blockquote>
<br>
</div>
<div>
<div dir="ltr"><span style="background-color: rgba(255, 255, 255, 0);">--<br>
____<br>
|| \\UTGERS,       |---------------------------*O*---------------------------<br>
||_// the State     |         Ryan Novosielski - <a href="mailto:novosirj@rutgers.edu" dir="ltr" x-apple-data-detectors="true" x-apple-data-detectors-type="link" x-apple-data-detectors-result="1">novosirj@rutgers.edu</a><br>
|| \\ University | Sr. Technologist - 973/972.0922 (2x0922) ~*~ RBHS Campus<br>
||  \\    of NJ     | Office of Advanced Research Computing - MSB C630, Newark<br>
    `'</span></div>
</div>
</body>
</html>