<div dir="ltr"><div dir="ltr"><div dir="ltr"><div>Hi all,</div><div><br></div><div>I think it's not that easy to keep SLURM up to date in a cluster of more than 3k nodes with a lot of users. I mean, that cluster has only a little more than 2 years old and my today's submission got the JOBID 12711473, the queue has 9769 jobs (squeue | wc -l). In two years there were only two maintenances that impacted the users and each one was announced a few months prior. They told me that they actually plan to update SLURM but not until late 2019 because they have other things to do before that. Also, I'm the only one asking for heterogeneous jobs...<br></div><div><br></div><div>Rafael.<br></div></div></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">Le jeu. 21 mars 2019 à 22:19, Prentice Bisbal <<a href="mailto:pbisbal@pppl.gov" target="_blank">pbisbal@pppl.gov</a>> a écrit :<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">On 3/21/19 4:40 PM, Reuti wrote:<br>
<br>
>> Am 21.03.2019 um 16:26 schrieb Prentice Bisbal <<a href="mailto:pbisbal@pppl.gov" target="_blank">pbisbal@pppl.gov</a>>:<br>
>><br>
>><br>
>> On 3/20/19 1:58 PM, Christopher Samuel wrote:<br>
>>> On 3/20/19 4:20 AM, Frava wrote:<br>
>>><br>
>>>> Hi Chris, thank you for the reply.<br>
>>>> The team that manages that cluster is not very fond of upgrading SLURM, which I understand.<br>
>> As a system admin who manages clusters myself, I don't understand this. Our job is to provide and maintain resources for our users. Part of that maintenance is to provide updates for security, performance, and functionality (new features) reasons. HPC has always been a leading-edge kind if field, so I feel this is even more important for HPC admins.<br>
>><br>
>> Yes, there can be issues caused by updates, but those can be with proper planning: Have a plan to do the actual upgrade, have a plan to test for issues, and have a plan to revert to an earlier version if issues are discovered. This is work, but it's really not all that much work, and this is exactly the work we are being paid to do as cluster admins.<br>
> Besides the work on the side of the admins, also the users are involved: exchanging libraries also means to run the test suites of their applications again.<br>
><br>
> -- Reuti<br>
<br>
That implies the users actually wrote test suites. ;-)<br>
<br>
<br>
<br>
</blockquote></div>