<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
</head>
<body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space;" class="">
Hi Andy,
<div class=""><br class="">
</div>
<div class="">I followed your advice - <font face="sans-serif" class="">md5sum /etc/munge/munge.key and they are the same on all systems.</font></div>
<div class=""><font face="sans-serif" class=""><br class="">
</font></div>
<div class=""><font face="sans-serif" class="">what else can it be? I will cheek the clock on the systems again as suggested by Chris</font></div>
<div class=""><font face="sans-serif" class=""><br class="">
</font></div>
<div class=""><font face="sans-serif" class="">Best,</font></div>
<div class=""><font face="sans-serif" class="">Eric</font></div>
<div class=""><br class="">
<div class="">
<div style="color: rgb(0, 0, 0); letter-spacing: normal; orphans: auto; text-align: start; text-indent: 0px; text-transform: none; white-space: normal; widows: auto; word-spacing: 0px; -webkit-text-stroke-width: 0px; word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space;" class="">
<div style="color: rgb(0, 0, 0); letter-spacing: normal; orphans: auto; text-align: start; text-indent: 0px; text-transform: none; white-space: normal; widows: auto; word-spacing: 0px; -webkit-text-stroke-width: 0px; word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space;" class="">
<div style="text-align: -webkit-auto; orphans: 2; widows: 2; word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space;" class="">
<div style="orphans: auto; widows: auto;" class=""><span style="text-align: -webkit-auto; background-color: rgba(255, 255, 255, 0);" class="">_____________________________________________________________________________________________________</span></div>
<div style="orphans: auto; widows: auto;" class=""><span style="background-color: rgba(255, 255, 255, 0);" class=""><br class="">
</span></div>
<span style="background-color: rgba(255, 255, 255, 0);" class=""><b class="">
<div style="orphans: auto; widows: auto;" class=""><b style="text-align: -webkit-auto;" class="">Eric F.  Alemany</b></div>
</b>
<div style="orphans: auto; widows: auto;" class=""><i style="text-align: -webkit-auto;" class="">System Administrator for Research</i></div>
</span>
<div style="orphans: auto; widows: auto;" class=""><span style="background-color: rgba(255, 255, 255, 0);" class=""><br class="">
</span></div>
<div style="orphans: auto; widows: auto;" class=""><span style="text-align: -webkit-auto; background-color: rgba(255, 255, 255, 0);" class="">Division of Radiation & Cancer  Biology</span></div>
<div style="orphans: auto; widows: auto;" class=""><span style="text-align: -webkit-auto; background-color: rgba(255, 255, 255, 0);" class="">Department of Radiation Oncology</span></div>
<div style="orphans: auto; widows: auto;" class=""><span style="background-color: rgba(255, 255, 255, 0);" class=""><br class="">
</span></div>
<div style="orphans: auto; widows: auto;" class=""><span style="text-align: -webkit-auto; background-color: rgba(255, 255, 255, 0);" class="">Stanford University School of Medicine</span></div>
<div style="orphans: auto; widows: auto;" class=""><span style="text-align: -webkit-auto; background-color: rgba(255, 255, 255, 0);" class="">Stanford, California 94305</span></div>
<div style="orphans: auto; widows: auto;" class=""><span style="background-color: rgba(255, 255, 255, 0);" class=""><br class="">
</span></div>
<div style="orphans: auto; widows: auto;" class=""><span style="background-color: rgba(255, 255, 255, 0);" class=""><font style="text-align: -webkit-auto;" class="">Tel:</font><a href="tel:1-650-498-7969" x-apple-data-detectors="true" x-apple-data-detectors-type="telephone" x-apple-data-detectors-result="1" style="text-align: -webkit-auto;" class="">1-650-498-7969</a><font style="text-align: -webkit-auto;" class=""> 
 No Texting</font></span></div>
<div style="orphans: auto; widows: auto;" class=""><span style="background-color: rgba(255, 255, 255, 0);" class=""><font style="text-align: -webkit-auto;" class="">Fax:</font><a href="tel:1-650-723-7382" x-apple-data-detectors="true" x-apple-data-detectors-type="telephone" x-apple-data-detectors-result="2" style="text-align: -webkit-auto;" class="">1-650-723-7382</a></span></div>
<div style="orphans: auto; widows: auto;" class=""><br class="">
</div>
</div>
<div style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space;" class="">
<font style="background-color: rgba(255, 255, 255, 0);" class=""></font></div>
</div>
</div>
<br class="Apple-interchange-newline">
</div>
<br class="">
<div>
<blockquote type="cite" class="">
<div class="">On May 7, 2018, at 5:39 PM, Riebs, Andy <<a href="mailto:andy.riebs@hpe.com" class="">andy.riebs@hpe.com</a>> wrote:</div>
<br class="Apple-interchange-newline">
<div class="">
<meta content="text/html; charset=utf-8" class="">
<div class="" style="word-wrap:break-word">
<div dir="auto" style="direction: ltr; margin: 0px; padding: 0px; font-family: sans-serif; font-size: 11pt;" class="">
The /etc/munge/ munge.key is different on the systems. Try<br class="">
</div>
<div dir="auto" style="direction: ltr; margin: 0px; padding: 0px; font-family: sans-serif; font-size: 11pt;" class="">
md5sum /etc/munge/munge.key on both systems to see if they are the same...<br class="">
<br class="">
</div>
<div dir="auto" style="direction: ltr; margin: 0px; padding: 0px; font-family: sans-serif; font-size: 11pt;" class="">
<div dir="auto" style="direction: ltr; margin: 0px; padding: 0px; font-family: sans-serif; font-size: 11pt;" class="">
-- <br class="">
</div>
<div dir="auto" style="direction: ltr; margin: 0px; padding: 0px; font-family: sans-serif; font-size: 11pt;" class="">
Andy Riebs<br class="">
</div>
<div dir="auto" style="direction: ltr; margin: 0px; padding: 0px; font-family: sans-serif; font-size: 11pt;" class="">
<a href="mailto:andy.riebs@hpe.com" class="">andy.riebs@hpe.com</a> <br class="">
</div>
<div dir="auto" style="direction: ltr; margin: 0px; padding: 0px; font-family: sans-serif; font-size: 11pt;" class="">
Hewlett-Packard Enterprise<br class="">
</div>
<div dir="auto" style="direction: ltr; margin: 0px; padding: 0px; font-family: sans-serif; font-size: 11pt;" class="">
+1 404 648 9024</div>
<br class="">
</div>
<hr tabindex="-1" style="display:inline-block; width:98%" class="">
<div id="divRplyFwdMsg" dir="ltr" class=""><font face="Calibri, sans-serif" style="font-size:11pt" class=""><b class="">From:</b> slurm-users <<a href="mailto:slurm-users-bounces@lists.schedmd.com" class="">slurm-users-bounces@lists.schedmd.com</a>> on behalf
 of Eric F. Alemany <<a href="mailto:ealemany@stanford.edu" class="">ealemany@stanford.edu</a>><br class="">
<b class="">Sent:</b> Monday, May 7, 2018 7:40:53 PM<br class="">
<b class="">To:</b> Slurm User Community List<br class="">
<b class="">Subject:</b> Re: [slurm-users] Nodes are down after 2-3 minutes.</font>
<div class=""> </div>
</div>
<div class="">Hi Chris,
<div class=""><br class="">
</div>
<div class="">I followed the link as well as the instruction on “Securing the installation” and “Testing the installation”</div>
<div class=""><br class="">
</div>
<div class="">The only thing that i am not able to do is:  <span class="" style="color:rgb(36,41,46)">Check if a credential can be remotely decoded</span></div>
<div class=""><br class="">
</div>
<div class=""><br class="">
</div>
<div class="">
<div class="" style="margin:0px; font-size:11px; line-height:normal; font-family:Menlo; background-color:rgb(255,255,255)">
<span class="" style=""><b class="">eric@radoncmaster</b>:<b class="">/etc/munge</b>$ munge -n | ssh
<a href="mailto:eric@radonc01.stanford.edu" class="">eric@radonc01.stanford.edu</a> unmunge</span></div>
<div class="" style="margin:0px; font-size:11px; line-height:normal; font-family:Menlo; background-color:rgb(255,255,255)">
<span class="" style="">unmunge: Error: Invalid credential</span></div>
</div>
<div class=""><br class="">
</div>
<div class=""><br class="">
</div>
<div class="">Did i do something wrong somewhere ?</div>
<div class=""><br class="">
</div>
<div class="">Thank you for your help<br class="">
<div class="">
<div class="" style="letter-spacing: normal; text-align: start; text-indent: 0px; text-transform: none; white-space: normal; word-spacing: 0px; word-wrap: break-word;">
<div class="" style="letter-spacing: normal; text-align: start; text-indent: 0px; text-transform: none; white-space: normal; word-spacing: 0px; word-wrap: break-word;">
<div class="" style="orphans:2; widows:2; word-wrap:break-word">
<div class="" style="orphans:auto; widows:auto"><span class="" style="background-color:rgba(255,255,255,0)">_____________________________________________________________________________________________________</span></div>
<div class="" style="orphans:auto; widows:auto"><span class="" style="background-color:rgba(255,255,255,0)"><br class="">
</span></div>
<span class="" style="background-color:rgba(255,255,255,0)"><b class="">
<div class="" style="orphans:auto; widows:auto"><b class="" style="">Eric F.  Alemany</b></div>
</b>
<div class="" style="orphans:auto; widows:auto"><i class="" style="">System Administrator for Research</i></div>
</span>
<div class="" style="orphans:auto; widows:auto"><span class="" style="background-color:rgba(255,255,255,0)"><br class="">
</span></div>
<div class="" style="orphans:auto; widows:auto"><span class="" style="background-color:rgba(255,255,255,0)">Division of Radiation & Cancer  Biology</span></div>
<div class="" style="orphans:auto; widows:auto"><span class="" style="background-color:rgba(255,255,255,0)">Department of Radiation Oncology</span></div>
<div class="" style="orphans:auto; widows:auto"><span class="" style="background-color:rgba(255,255,255,0)"><br class="">
</span></div>
<div class="" style="orphans:auto; widows:auto"><span class="" style="background-color:rgba(255,255,255,0)">Stanford University School of Medicine</span></div>
<div class="" style="orphans:auto; widows:auto"><span class="" style="background-color:rgba(255,255,255,0)">Stanford, California 94305</span></div>
<div class="" style="orphans:auto; widows:auto"><span class="" style="background-color:rgba(255,255,255,0)"><br class="">
</span></div>
<div class="" style="orphans:auto; widows:auto"><span class="" style="background-color:rgba(255,255,255,0)"><font class="" style="">Tel:</font><a href="tel:1-650-498-7969" class="" style="">1-650-498-7969</a><font class="" style="">  No Texting</font></span></div>
<div class="" style="orphans:auto; widows:auto"><span class="" style="background-color:rgba(255,255,255,0)"><font class="" style="">Fax:</font><a href="tel:1-650-723-7382" class="" style="">1-650-723-7382</a></span></div>
<div class="" style="orphans:auto; widows:auto"><br class="">
</div>
</div>
<div class="" style="word-wrap:break-word"><font class="" style="background-color:rgba(255,255,255,0)"></font></div>
</div>
</div>
<br class="Apple-interchange-newline">
</div>
<br class="">
<div class="">
<blockquote type="cite" class="">
<div class="">On May 7, 2018, at 3:42 PM, Chris Samuel <<a href="mailto:chris@csamuel.org" class="">chris@csamuel.org</a>> wrote:</div>
<br class="Apple-interchange-newline">
<div class="">
<div class="">On Tuesday, 8 May 2018 8:38:47 AM AEST Eric F. Alemany wrote:<br class="">
<br class="">
<blockquote type="cite" class="">I thought i did but I will do it again<br class="">
</blockquote>
<br class="">
If that doesn't work then check the "Securing the Installation" and "Testing <br class="">
the Installation" parts of the munge docs here (ignore the installation part):<br class="">
<br class="">
<a href="https://github.com/dun/munge/wiki/Installation-Guide" class="">https://github.com/dun/munge/wiki/Installation-Guide</a><br class="">
<br class="">
Good luck!<br class="">
Chris<br class="">
-- <br class="">
Chris Samuel  :  <a href="http://www.csamuel.org/" class="">http://www.csamuel.org/</a>  :  Melbourne, VIC<br class="">
<br class="">
<br class="">
</div>
</div>
</blockquote>
</div>
<br class="">
</div>
</div>
</div>
</div>
</blockquote>
</div>
<br class="">
</div>
</body>
</html>