<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:x="urn:schemas-microsoft-com:office:excel" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=us-ascii">
<meta name="Generator" content="Microsoft Word 14 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
{font-family:Calibri;
panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
{margin:0in;
margin-bottom:.0001pt;
font-size:11.0pt;
font-family:"Calibri","sans-serif";}
a:link, span.MsoHyperlink
{mso-style-priority:99;
color:blue;
text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
{mso-style-priority:99;
color:purple;
text-decoration:underline;}
span.EmailStyle17
{mso-style-type:personal-compose;
font-family:"Calibri","sans-serif";
color:windowtext;}
.MsoChpDefault
{mso-style-type:export-only;}
@page WordSection1
{size:8.5in 11.0in;
margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
{page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-US" link="blue" vlink="purple">
<div class="WordSection1">
<p class="MsoNormal">Hi All,<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">I am trying to install slurm-17.11.3-2 on Redhat Linux 7.2 system. I have completed the installation and configuration but not able to start slurmd.service. Below are the logs from /var/log/slurmd.log. I have also pasted slurm.conf, cgroup.conf
and cgroup_allowed_devices_file.conf for quick reference. I am able to successfully start slurmctld service. Can anyone please guide me on finding the particular settings which is causing this issue?
<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">[2018-02-28T12:55:34.973] Message aggregation disabled<o:p></o:p></p>
<p class="MsoNormal">[2018-02-28T12:55:34.974] error: cgroup namespace 'freezer' not mounted. aborting<o:p></o:p></p>
<p class="MsoNormal">[2018-02-28T12:55:34.974] error: unable to create freezer cgroup namespace<o:p></o:p></p>
<p class="MsoNormal">[2018-02-28T12:55:34.974] error: Couldn't load specified plugin name for proctrack/cgroup: Plugin init() callback failed<o:p></o:p></p>
<p class="MsoNormal">[2018-02-28T12:55:34.974] error: cannot create proctrack context for proctrack/cgroup<o:p></o:p></p>
<p class="MsoNormal">[2018-02-28T12:55:34.974] error: slurmd initialization failed<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">[root@montecarlo01 etc]# cat /usr/local/etc/slurm.conf | grep -v ^#<o:p></o:p></p>
<p class="MsoNormal">ControlMachine=montecarlo01<o:p></o:p></p>
<p class="MsoNormal">ControlAddr=<IP Address removed from email.><o:p></o:p></p>
<p class="MsoNormal">GresTypes=gpu<o:p></o:p></p>
<p class="MsoNormal">MpiDefault=none<o:p></o:p></p>
<p class="MsoNormal">ProctrackType=proctrack/cgroup<o:p></o:p></p>
<p class="MsoNormal">ReturnToService=1<o:p></o:p></p>
<p class="MsoNormal">SlurmctldPidFile=/var/run/slurmctld.pid<o:p></o:p></p>
<p class="MsoNormal">SlurmdPidFile=/var/run/slurmd.pid<o:p></o:p></p>
<p class="MsoNormal">SlurmdSpoolDir=/var/spool/slurmd<o:p></o:p></p>
<p class="MsoNormal">SlurmUser=slurm<o:p></o:p></p>
<p class="MsoNormal">StateSaveLocation=/var/spool/slurmctld<o:p></o:p></p>
<p class="MsoNormal">SwitchType=switch/none<o:p></o:p></p>
<p class="MsoNormal">TaskPlugin=task/cgroup<o:p></o:p></p>
<p class="MsoNormal">FastSchedule=1<o:p></o:p></p>
<p class="MsoNormal">SchedulerType=sched/backfill<o:p></o:p></p>
<p class="MsoNormal">SelectType=select/linear<o:p></o:p></p>
<p class="MsoNormal">AccountingStorageType=accounting_storage/none<o:p></o:p></p>
<p class="MsoNormal">ClusterName=montecarlo01<o:p></o:p></p>
<p class="MsoNormal">JobAcctGatherType=jobacct_gather/linux<o:p></o:p></p>
<p class="MsoNormal">SlurmctldLogFile=/var/log/slurmctld.log<o:p></o:p></p>
<p class="MsoNormal">SlurmdLogFile=/var/log/slurmd.log<o:p></o:p></p>
<p class="MsoNormal">NodeName=montecarlo01 NodeAddr=10.64.23.68 Sockets=1 CoresPerSocket=8 ThreadsPerCore=2 Gres=gpu:8 State=UNKNOWN<o:p></o:p></p>
<p class="MsoNormal">PartitionName=AMBER_GPU Nodes=montecarlo01 Default=YES MaxTime=INFINITE State=UP<o:p></o:p></p>
<p class="MsoNormal">[root@montecarlo01 etc]#<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">[root@montecarlo01 slurm]# cat /usr/local/etc/slurm/cgroup.conf<o:p></o:p></p>
<p class="MsoNormal">#CgroupMountpoint="/sys/fs/cgroup"<o:p></o:p></p>
<p class="MsoNormal">#CgroupAutomount=yes<o:p></o:p></p>
<p class="MsoNormal">#iCgroupReleaseAgentDir="/usr/local/etc/slurm/cgroup"<o:p></o:p></p>
<p class="MsoNormal">#AllowedDevicesFile="/usr/local/etc/slurm/cgroup_allowed_devices_file.conf"<o:p></o:p></p>
<p class="MsoNormal">ConstrainCores=no<o:p></o:p></p>
<p class="MsoNormal">TaskAffinity=no<o:p></o:p></p>
<p class="MsoNormal">ConstrainRAMSpace=no<o:p></o:p></p>
<p class="MsoNormal">ConstrainSwapSpace=no<o:p></o:p></p>
<p class="MsoNormal">ConstrainDevices=no<o:p></o:p></p>
<p class="MsoNormal">AllowedRamSpace=no<o:p></o:p></p>
<p class="MsoNormal">AllowedSwapSpace=no<o:p></o:p></p>
<p class="MsoNormal">MaxRAMPercent=100<o:p></o:p></p>
<p class="MsoNormal">MaxSwapPercent=100<o:p></o:p></p>
<p class="MsoNormal">MinRAMSpace=30<o:p></o:p></p>
<p class="MsoNormal">[root@montecarlo01 slurm]#<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">[root@montecarlo01 slurm]# cat /usr/local/etc/slurm/cgroup_allowed_devices_file.conf<o:p></o:p></p>
<p class="MsoNormal">/dev/null<o:p></o:p></p>
<p class="MsoNormal">/dev/urandom<o:p></o:p></p>
<p class="MsoNormal">/dev/zero<o:p></o:p></p>
<p class="MsoNormal">/dev/sda*<o:p></o:p></p>
<p class="MsoNormal">/dev/cpu/*/*<o:p></o:p></p>
<p class="MsoNormal">/dev/pts/*<o:p></o:p></p>
<p class="MsoNormal">[root@montecarlo01 slurm]#<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Thanks,<o:p></o:p></p>
<p class="MsoNormal">Yogesh Aggarwal<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
This message may contain confidential or privileged information. If you are not the intended recipient, please advise the sender immediately by reply e-mail and delete this message and any attachments without retaining a copy. Thank you for your cooperation.
</body>
</html>