<div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div class="gmail_default" style="font-family:tahoma,sans-serif">I think I know what is going wrong. Actually the bug is not related to slurm or rocks itself. It is a result of some mismatches due to the update of softwares including ssh, centos, rocks and slurm.</div><div class="gmail_default" style="font-family:tahoma,sans-serif"><br></div><div class="gmail_default" style="font-family:tahoma,sans-serif">Recently, I have updated my rocks using "yum update". The result was fetching the latest packages of Centos 7 (1804). I hit a problem that I was unable to ssh to the nodes while passwordless ssh was working before the update. See my discussion at [1].</div><div class="gmail_default" style="font-family:tahoma,sans-serif">With the help of Trevor [2], I was able to fix the problem. Please see the technical comment from him in the post.</div><div class="gmail_default" style="font-family:tahoma,sans-serif"><br></div><div class="gmail_default" style="font-family:tahoma,sans-serif">So, I am *guessing* that the latest version of slurm is not compatible with 1804 from Centos. In other word, something has been added/fixed in the ssh library which is now causing some mismatches.</div><div class="gmail_default" style="font-family:tahoma,sans-serif"><br></div><div class="gmail_default" style="font-family:tahoma,sans-serif"><br></div><div class="gmail_default" style="font-family:tahoma,sans-serif"><br></div><div class="gmail_default" style="font-family:tahoma,sans-serif"><br></div><div class="gmail_default" style="font-family:tahoma,sans-serif"><p>>and do you have in ~/.ssh/ and an ssh key named "id_rsa" and is
      passwordless ?</p><p>Actually there is no id_rsa in my home for host based authentication.<br></p><p></p><p>[mahmood@rocks7 ~]$ cat .ssh/known_hosts <br>localhost ecdsa-sha2-nistp256 AAAAE2VjZHNhLXNoYTItbmlzdHAyNTYAAAAIbmlzdHAyNTYAAABBBNLjMdBkI636zSWU1N/dns3qHqc7Dr8JH/ulb2xryFM39Rk8p/4DIbkaV05fMpS6nXeJUjSY2X7U14bPRoiEeU4=<br>[mahmood@rocks7 ~]$ ls .ssh/<br>known_hosts<br>[mahmood@rocks7 ~]$ ssh compute-0-3 -Y<br>Last login: Tue Nov 20 16:45:13 2018 from rocks7.local<br>Rocks Compute Node<br>Rocks 7.0 (Manzanita)<br>Profile built 10:57 15-Nov-2018<br><br>Kickstarted 11:17 15-Nov-2018<br>[mahmood@compute-0-3 ~]$ xclock<br>^C<br><br><br></p><p><br></p><p><br></p><p>>So that looks like for some reason your display is set to :0 (or similar). Are <br>
>you by some chance trying to run this on an X server on the console of rocks7?</p><p><span class="gmail-im"></span></p><p><span class="gmail-im"><span class="gmail-im"></span>
>That also looks like an error you should look into fixing first.</span></p><p><br></p><p>I think that is caused by the issue that I described above.</p><p><br></p></div><div class="gmail_default" style="font-family:tahoma,sans-serif"><br></div><div class="gmail_default" style="font-family:tahoma,sans-serif">[1] <a href="https://lists.sdsc.edu/pipermail/npaci-rocks-discussion/2018-November/072367.html">https://lists.sdsc.edu/pipermail/npaci-rocks-discussion/2018-November/072367.html</a><br></div><div class="gmail_default" style="font-family:tahoma,sans-serif">[2] <a href="https://lists.sdsc.edu/pipermail/npaci-rocks-discussion/2018-November/072380.html">https://lists.sdsc.edu/pipermail/npaci-rocks-discussion/2018-November/072380.html</a><br></div><div class="gmail_default" style="font-family:tahoma,sans-serif"><br></div><div class="gmail_default" style="font-family:tahoma,sans-serif"><br></div><div class="gmail_default" style="font-family:tahoma,sans-serif"><br clear="all"></div><div><div dir="ltr" class="gmail_signature"><div dir="ltr"><font face="tahoma,sans-serif">Regards,<br>Mahmood</font><br><br><br></div></div></div><br></div></div></div><br><div class="gmail_quote"><div dir="ltr">On Tue, Nov 20, 2018 at 2:58 PM Chris Samuel <<a href="mailto:chris@csamuel.org">chris@csamuel.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">On Tuesday, 20 November 2018 2:51:26 AM AEDT Mahmood Naderan wrote:<br>
<br>
> With and without --x11, I am not able to see xclock on a compute node.<br>
> <br>
> [mahmood@rocks7 ~]$ srun --x11 --nodelist=compute-0-3 -n 1 -c 6 --mem=8G -A<br>
> y8 -p RUBY xclock<br>
> srun: error: Cannot forward to local display. Can only use X11 forwarding<br>
> with network displays.<br>
<br>
So that looks like for some reason your display is set to :0 (or similar). Are <br>
you by some chance trying to run this on an X server on the console of rocks7?<br>
<br>
> [mahmood@rocks7 ~]$ rocks run host compute-0-3 "yum list libssh2-devel"<br>
> Warning: untrusted X11 forwarding setup failed: xauth key data not generated<br>
<br>
That also looks like an error you should look into fixing first.<br>
<br>
All the best,<br>
Chris<br>
-- <br>
 Chris Samuel  :  <a href="http://www.csamuel.org/" rel="noreferrer" target="_blank">http://www.csamuel.org/</a>  :  Melbourne, VIC<br>
<br>
<br>
<br>
<br>
</blockquote></div></div></div>