<div dir="ltr">Hello,<div><br></div><div>Memory for one of the jobs is going over the limit and slurm lets it run and the job does not terminate. The job forks multiple jobs, but I don't think we have had problems with slurm calculating total memory usage for these kind of jobs. I've tested it on a single thread and the killing mechanism does work. Does anyone know what might be the problem? </div><div><br></div><div>RSS when I check for the job using ps is way over the limit (5x). Previous instances of this jobs have either timed out or cancelled and the memory usage is not logged on sacct. So I have no idea as to what the MaxRSS slurm sees.</div><div><br></div><div>I have included some information to explain my configuration, but let me know if you need more to figure it out.</div><div><br></div><div>Ubuntu 16.04.5</div><div>slurm version 17.02.9<br></div><div><br></div><div>JobAcctGatherType= jobacct_gather/linux</div><div>Virtual Memory limit has been removed/unlimited</div><div><br></div><div>Thank you,</div><div><br></div><div>Jin</div></div>