<div dir="ltr">All,<div><br></div><div>I have a cloud based cluster using slurmĀ 19.05.0-1</div><div>I removed one of the partitions, but now everytime I start slurmctld I get some errors:</div><div><br></div><div>slurmctld[63042]: error: Invalid partition (mpi-h44rs) for JobId=52545<br>slurmctld[63042]: error: _find_node_record(756): lookup failure for mpi-h44rs-01<br>slurmctld[63042]: error: node_name2bitmap: invalid node specified mpi-h44rs-01<br>.</div><div>.</div>slurmctld[63042]: error: _find_node_record(756): lookup failure for mpi-h44rs-05<br>slurmctld[63042]: error: node_name2bitmap: invalid node specified mpi-h44rs-05<br>slurmctld[63042]: error: Invalid nodes (mpi-h44rs-[01-05]) for JobId=52545<br><div><br></div><div>I suspect this is in the saved state directory and if I were to down the entire cluster and delete those files up, it would clear it up, but I prefer to not have to down the cluster...</div><div><br></div><div>Is there a way to clean up "phantom" nodes and partitions that were deleted?</div><div><br></div><div>Brian AndrusĀ </div></div>