<div dir="ltr"><div>Hi</div><div><br></div><div>When I try to submit a job to one of our partitions it just stay in the stay pending with the reason "PartitionConfig".  Can someone point me in the right direction for how to troubleshoot this?  I'm a bit stumpped.</div><div><br></div><div>Some details of the setup</div><div><br></div><div>The version is 19.05.7</div><div><br></div><div>This is the job that is stuck in state pending</div><div>             JOBID PARTITION     NAME     USER ST       TIME  NODES NODELIST(REASON)<br>          10860160   highmem MooseBen byron PD       0:00     16 (PartitionConfig)</div><div><br></div><div>$ sinfo -p highmem<br>PARTITION AVAIL  TIMELIMIT  NODES  STATE NODELIST<br>highmem      up   infinite      1  drain intel-0012<br>highmem      up   infinite     19   idle intel-[0001-0011,0013-0020]</div><div><br></div><div>The output from  scontrol show part</div><div>PartitionName=highmem<br>   AllowGroups=ALL AllowAccounts=ALL AllowQos=ALL<br>   AllocNodes=ALL Default=NO QoS=N/A<br>   DefaultTime=02:00:00 DisableRootJobs=NO ExclusiveUser=NO GraceTime=0 Hidden=NO<br>   MaxNodes=UNLIMITED MaxTime=UNLIMITED MinNodes=0 LLN=NO MaxCPUsPerNode=UNLIMITED<br>   Nodes=intel-00[01-20]<br>   PriorityJobFactor=1 PriorityTier=1 RootOnly=NO ReqResv=NO OverSubscribe=EXCLUSIVE<br>   OverTimeLimit=NONE PreemptMode=REQUEUE<br>   State=UP TotalCPUs=320 TotalNodes=20 SelectTypeParameters=NONE<br>   JobDefaults=(null)<br>   DefMemPerNode=UNLIMITED MaxMemPerNode=UNLIMITED</div><div><br></div></div>