<div dir="ltr"><div>As partition CLUSTER is not in your /etc/slurm/parts file, it likely was added via scontrol command.</div><div>Presumably you or a colleague created a CLUSTER partition, whether intentionally or not.</div><div><br></div><div>Use <br></div><div>scontrol show partition CLUSTER</div><div>to view it.<br></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Wed, Mar 27, 2019 at 1:44 PM Mahmood Naderan <<a href="mailto:mahmood.nt@gmail.com">mahmood.nt@gmail.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div dir="ltr"><div class="gmail_default" style="font-family:tahoma,sans-serif">So, it seems that it is not an easy thing at the moment!</div><div class="gmail_default" style="font-family:tahoma,sans-serif"><br></div><div class="gmail_default" style="font-family:tahoma,sans-serif">
>Partitions are defined by the systems administrators, you'd need to <br>
>speak with them about their reasoning for those. <br></div><div class="gmail_default" style="font-family:tahoma,sans-serif"><br></div><div class="gmail_default" style="font-family:tahoma,sans-serif">Its me :)</div><div class="gmail_default" style="font-family:tahoma,sans-serif">I haven't defined a partition named CLUSTER<br></div><div class="gmail_default" style="font-family:tahoma,sans-serif"><br></div><div><div dir="ltr" class="gmail-m_4513140897241365374gmail_signature"><div dir="ltr"><font face="tahoma,sans-serif">Regards,<br>Mahmood</font><br><br><br></div></div></div><br></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Wed, Mar 27, 2019 at 8:42 PM Christopher Samuel <<a href="mailto:chris@csamuel.org" target="_blank">chris@csamuel.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">On 3/27/19 8:39 AM, Mahmood Naderan wrote:<br>
<br>
> mpirun pw.x -<a href="http://imos2.rlx.in" rel="noreferrer" target="_blank">imos2.rlx.in</a>  <<a href="http://mos2.rlx.in" rel="noreferrer" target="_blank">http://mos2.rlx.in</a>><br>
<br>
You will need to read the documentation for this:<br>
<br>
<a href="https://slurm.schedmd.com/heterogeneous_jobs.html" rel="noreferrer" target="_blank">https://slurm.schedmd.com/heterogeneous_jobs.html</a><br>
<br>
Especially note both of these:<br>
<br>
IMPORTANT: The ability to execute a single application across more than <br>
one job allocation does not work with all MPI implementations or Slurm <br>
MPI plugins. Slurm's ability to execute such an application can be <br>
disabled on the entire cluster by adding "disable_hetero_steps" to <br>
Slurm's SchedulerParameters configuration parameter.<br>
<br>
IMPORTANT: While the srun command can be used to launch heterogeneous <br>
job steps, mpirun would require substantial modification to support <br>
heterogeneous applications. We are aware of no such mpirun development <br>
efforts at this time.<br>
<br>
So at the very least you'll need to use srun, not mpirun and confirm <br>
that the MPI you are using supports this Slurm feature.<br>
<br>
> Also, the partition names are weird. We have these entries:<br>
<br>
Partitions are defined by the systems administrators, you'd need to <br>
speak with them about their reasoning for those.<br>
<br>
All the best,<br>
Chris<br>
-- <br>
   Chris Samuel  :  <a href="http://www.csamuel.org/" rel="noreferrer" target="_blank">http://www.csamuel.org/</a>  :  Berkeley, CA, USA<br>
<br>
</blockquote></div></div>
</blockquote></div><br clear="all"><br>-- <br><div dir="ltr" class="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr">Tom Payerle <br>DIT-ACIGS/Mid-Atlantic Crossroads        <a href="mailto:payerle@umd.edu" target="_blank">payerle@umd.edu</a><br></div><div>5825 University Research Park               (301) 405-6135<br></div><div dir="ltr">University of Maryland<br>College Park, MD 20740-3831<br></div></div></div></div></div></div>