<div dir="ltr"><div>Using sacct you can find those information, try the below options and see if that works.</div><div><br></div><div>sacct -j <job id>  --format=jobid,ReqTRES%50,ReqGres<br></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Thu, Jun 4, 2020 at 1:30 PM Kota Tsuyuzaki <<a href="mailto:kota.tsuyuzaki.pc@hco.ntt.co.jp">kota.tsuyuzaki.pc@hco.ntt.co.jp</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">Hello Guys,<br>
<br>
We are running GPU clusters with Slurm and SlurmDBD (version 19.05 series) and some of GPUs seemed to get troubles for attached<br>
jobs. To investigate if the troubles happened on the same GPUs, I'd like to get GPU indices of the completed jobs.<br>
<br>
In my understanding `scontrol show job` can show the indices (as IDX in gres info) but cannot be used for completed job. And also<br>
`sacct -j` is available for complete jobs but won't print the indices.<br>
<br>
Is there any way (commands, configurations, etc...) to see the allocated GPU indices for completed jobs?<br>
<br>
Best regards,<br>
<br>
--------------------------------------------<br>
露崎　浩太 (Kota Tsuyuzaki)<br>
<a href="mailto:kota.tsuyuzaki.pc@hco.ntt.co.jp" target="_blank">kota.tsuyuzaki.pc@hco.ntt.co.jp</a><br>
NTTソフトウェアイノベーションセンタ<br>
分散処理基盤技術プロジェクト<br>
0422-59-2837<br>
---------------------------------------------<br>
<br>
<br>
<br>
<br>
<br>
</blockquote></div><br clear="all"><div><br></div>-- <br><div dir="ltr" class="gmail_signature">Regards.....<br>Sathish</div>