<div dir="ltr">Hi Chad,<div><br><div>Here is the most generally useful process I ended up with, implemented in a local custom utility script.</div><div><br></div><div>#Update slurm.conf everywhere</div><div>#Stop slurmctld<br>#Restart all slurmd processes<br>#Start slurmctld<br></div><div><br></div><div>per:</div><div><a href="https://wiki.fysik.dtu.dk/niflheim/SLURM#add-and-remove-nodes">https://wiki.fysik.dtu.dk/niflheim/SLURM#add-and-remove-nodes</a><br></div></div><div><br></div><div>I think you only will affect running jobs if you delete a partition, then you have a different procedure:</div><div><a href="https://slurm.schedmd.com/faq.html#delete_partition">https://slurm.schedmd.com/faq.html#delete_partition</a><br></div><div><br></div><div>However, I think there are a few other parameters in slurm.conf that may be more disruptive but they have warnings in the man page.</div><div><br></div><div>Regards,</div><div>Alex</div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Wed, Jul 24, 2019 at 10:28 AM Julius, Chad <<a href="mailto:Chad.Julius@sdstate.edu">Chad.Julius@sdstate.edu</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">





<div lang="EN-US">
<div class="gmail-m_5897100003341242257WordSection1">
<p class="MsoNormal">All,<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">As our user base grows, we are getting close to hitting the default MaxJobCount of 10,000.  Is it safe to edit this value, along with some fairshare settings while the cluster jobs are actively running?  As in, what are the ramifications
 if I changed the slurm.conf file and then restarted slurmctld and the slurmd services on all of the nodes.<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">My assumption is that the jobs will stay running and/or queued but I would like some reassurance.<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">Thanks, <u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">Chad<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
</div>

</blockquote></div>