<div dir="ltr">Sounds pretty safe, but with the current COVID-19 difficulties, including Spring quarter classes being taught remotely (starts tomorrow, fun times ahead), I'm a bit reluctant to poke a running system. This will get put on the giant list of things waiting for a scheduled downtime once campus re-opens.<div>Thanks,</div><div>Nate </div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Thu, Mar 26, 2020 at 8:26 AM Steven Dick <<a href="mailto:kg4ydw@gmail.com">kg4ydw@gmail.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">When I changed this on a running system, no jobs were killed, but<br>
slurm lost track of jobs on nodes and was unable to kill them or tell<br>
when they were finished until slurmd on each node was restarted.  I<br>
let running jobs complete and monitored them manually, and restarted<br>
slurmd on each node as they finished.<br>
<br>
In desperation, you can do it, but it might be better to wait until no<br>
jobs (or few jobs) are running.<br>
<br>
On Thu, Mar 26, 2020 at 10:40 AM Pär Lindfors <<a href="mailto:par.lindfors@uppmax.uu.se" target="_blank">par.lindfors@uppmax.uu.se</a>> wrote:<br>
><br>
> Hi Nate,<br>
><br>
> On Fri, 2020-02-21 at 11:38 -0800, Nathan R Crawford wrote:<br>
> >   If it just requires restarting slurmctld and the slurmd processes<br>
> > on the nodes, I will be happy! Can you confirm that no running or<br>
> > pending jobs were lost in the transition?<br>
><br>
> Did you change your SelectType to cons_tres? How did it go?<br>
><br>
> We need to do the same change on one of our clusters. I have done a few<br>
> tests on a tiny test cluster which so far indicates that changing works<br>
> even with jobs running, but a configuration change with even a small<br>
> risk of purging the job list makes me a little nervous.<br>
><br>
> Regards,<br>
> Pär Lindfors,<br>
> UPPMAX<br>
><br>
><br>
><br>
><br>
><br>
><br>
><br>
><br>
> När du har kontakt med oss på Uppsala universitet med e-post så innebär det att vi behandlar dina personuppgifter. För att läsa mer om hur vi gör det kan du läsa här: <a href="http://www.uu.se/om-uu/dataskydd-personuppgifter/" rel="noreferrer" target="_blank">http://www.uu.se/om-uu/dataskydd-personuppgifter/</a><br>
><br>
> E-mailing Uppsala University means that we will process your personal data. For more information on how this is performed, please read here: <a href="http://www.uu.se/en/about-uu/data-protection-policy" rel="noreferrer" target="_blank">http://www.uu.se/en/about-uu/data-protection-policy</a><br>
<br>
</blockquote></div><br clear="all"><div><br></div>-- <br><div dir="ltr" class="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><pre>Dr. Nathan Crawford              <a href="mailto:nathan.crawford@uci.edu" target="_blank">nathan.crawford@uci.edu</a>
Director of Scientific Computing
School of Physical Sciences
164 Rowland Hall                 Office: 2101 Natural Sciences II
University of California, Irvine  Phone: 949-824-4508
Irvine, CA 92697-2025, USA</pre></div></div></div></div></div></div>