

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

# Slurmguida per la modalità a coda multipla
<a name="multiple-queue-mode-slurm-user-guide"></a>

AWS ParallelCluster la versione 2.9.0 ha introdotto la modalità di coda multipla e una nuova architettura di scalabilità per (). Slurm Workload Manager Slurm

Le sezioni seguenti forniscono una panoramica generale sull'utilizzo di un Slurm cluster con la nuova architettura di scalabilità introdotta.

## Panoramica di
<a name="multiple-queue-mode-slurm-user-guide-overview"></a>

La nuova architettura di scalabilità si basa sulla Slurm [Cloud Scheduling Guide](https://slurm.schedmd.com/elastic_computing.html) e sul plug-in per il risparmio energetico. Per ulteriori informazioni sul plug-in per il risparmio energetico, consulta la Guida al [risparmio Slurm energetico](https://slurm.schedmd.com/power_save.html). Nella nuova architettura, le risorse che possono essere potenzialmente rese disponibili per un cluster sono in genere predefinite nella Slurm configurazione come nodi cloud.

## Ciclo di vita dei nodi cloud
<a name="multiple-queue-mode-slurm-user-guide-cloud-node-lifecycle"></a>

Durante il loro ciclo di vita, i nodi cloud entrano in diversi se non tutti i seguenti stati:`POWER_SAVING`, `POWER_UP` (`pow_up`), () e `ALLOCATED` (`alloc`). `POWER_DOWN` `pow_dn` In alcuni casi, un nodo cloud potrebbe entrare nello `OFFLINE` stato. L'elenco seguente descrive in dettaglio diversi aspetti di questi stati nel ciclo di vita del nodo cloud.
+ Un nodo in uno `POWER_SAVING` stato viene visualizzato con un `~` suffisso (ad esempio`idle~`) in. `sinfo` In questo stato, non esiste alcuna istanza EC2 che supporta il nodo. Tuttavia, Slurm può ancora allocare lavori al nodo.
+ Un nodo in transizione verso uno `POWER_UP` stato viene visualizzato con un `#` suffisso (ad esempio`idle#`) in. `sinfo`
+ Quando Slurm assegna un lavoro a un nodo in uno `POWER_SAVING` stato, il nodo si trasferisce automaticamente in uno stato. `POWER_UP` Altrimenti, i nodi possono essere posizionati manualmente nello `POWER_UP` stato utilizzando il `scontrol update nodename=nodename state=power_up` comando. In questa fase, `ResumeProgram` viene richiamato e le istanze EC2 vengono avviate e configurate per il backup di un nodo. `POWER_UP`
+ Un nodo attualmente disponibile per l'uso viene visualizzato senza alcun suffisso (ad esempio) in. `idle` `sinfo` Dopo che il nodo è stato configurato ed è entrato a far parte del cluster, diventa disponibile per l'esecuzione dei job. In questa fase, il nodo è configurato correttamente e pronto per l'uso. Come regola generale, consigliamo che il numero di istanze in EC2 sia uguale al numero di nodi disponibili. Nella maggior parte dei casi, i nodi statici sono sempre disponibili dopo la creazione del cluster.
+ Un nodo che sta passando a `POWER_DOWN` uno stato viene visualizzato con un `%` suffisso (ad esempio`idle%`) in. `sinfo` I nodi dinamici entrano automaticamente `POWER_DOWN` nello stato dopo. [`scaledown_idletime`](scaling-section.md#scaledown-idletime) Al contrario, i nodi statici nella maggior parte dei casi non vengono spenti. Tuttavia, i nodi possono essere posizionati manualmente nello `POWER_DOWN` stato utilizzando il `scontrol update nodename=nodename state=powering_down` comando. In questo stato, l'istanza associata a un nodo viene terminata e il nodo viene ripristinato allo `POWER_SAVING` stato per un utilizzo futuro successivo[`scaledown_idletime`](scaling-section.md#scaledown-idletime). L'`scaledown-idletime`impostazione viene salvata nella Slurm configurazione come `SuspendTimeout` impostazione.
+ Viene visualizzato un nodo offline con un `*` suffisso (ad esempio`down*`) dentro`sinfo`. Un nodo va offline se il Slurm controller non riesce a contattare il nodo o se i nodi statici sono disabilitati e le istanze di backup vengono terminate.

Consideriamo ora gli stati dei nodi mostrati nell'esempio seguente. `sinfo`

```
$ sinfo
PARTITION AVAIL  TIMELIMIT  NODES  STATE NODELIST
efa          up   infinite      4  idle~ efa-dy-c5n18xlarge-[1-4]
efa          up   infinite      1   idle efa-st-c5n18xlarge-1
gpu          up   infinite      1  idle% gpu-dy-g38xlarge-1
gpu          up   infinite      9  idle~ gpu-dy-g38xlarge-[2-10]
ondemand     up   infinite      2   mix# ondemand-dy-c52xlarge-[1-2]
ondemand     up   infinite     18  idle~ ondemand-dy-c52xlarge-[3-10],ondemand-dy-t2xlarge-[1-10]
spot*        up   infinite     13  idle~ spot-dy-c5xlarge-[1-10],spot-dy-t2large-[1-3]
spot*        up   infinite      2   idle spot-st-t2large-[1-2]
```

I `efa-st-c5n18xlarge-1` nodi `spot-st-t2large-[1-2]` and dispongono già di istanze di backup configurate e sono disponibili per l'uso. I `ondemand-dy-c52xlarge-[1-2]` nodi sono nello `POWER_UP` stato attuale e dovrebbero essere disponibili entro pochi minuti. Il `gpu-dy-g38xlarge-1` nodo è nello `POWER_DOWN` stato e passerà `POWER_SAVING` allo stato successivo [`scaledown_idletime`](scaling-section.md#scaledown-idletime) (il valore predefinito è 120 secondi).

Tutti gli altri nodi sono in `POWER_SAVING` stato e non sono supportati da istanze EC2.

## Lavorare con un nodo disponibile
<a name="multiple-queue-mode-slurm-user-guide-working-with-available-nodes"></a>

Un nodo disponibile è supportato da un'istanza EC2. Per impostazione predefinita, il nome del nodo può essere utilizzato per inserire direttamente SSH nell'istanza (ad esempio`ssh efa-st-c5n18xlarge-1`). L'indirizzo IP privato dell'istanza può essere recuperato utilizzando il `scontrol show nodes nodename` comando e controllando il `NodeAddr` campo. Per i nodi che non sono disponibili, il `NodeAddr` campo non deve puntare a un'istanza EC2 in esecuzione. Piuttosto, dovrebbe essere lo stesso del nome del nodo.

## Job stati e invio
<a name="multiple-queue-mode-slurm-user-guide-job-states"></a>

I lavori inviati nella maggior parte dei casi vengono immediatamente assegnati ai nodi del sistema o messi in sospeso se tutti i nodi sono allocati.

Se i nodi allocati per un processo includono nodi in uno `POWER_SAVING` stato, il processo inizia con uno `CF` stato o. `CONFIGURING` A questo punto, il processo attende che i nodi dello stato passino allo `POWER_SAVING` `POWER_UP` stato e diventino disponibili.

Dopo che tutti i nodi allocati per un lavoro sono disponibili, il lavoro entra nello stato `RUNNING` (`R`).

Per impostazione predefinita, tutti i lavori vengono inviati alla coda predefinita (nota come partizione in). Slurm Ciò è indicato da un `*` suffisso dopo il nome della coda. È possibile selezionare una coda utilizzando l'opzione di invio del `-p` lavoro.

Tutti i nodi sono configurati con le seguenti funzionalità, che possono essere utilizzate nei comandi di invio dei lavori:
+ Un tipo di istanza (ad esempio`c5.xlarge`)
+ Un tipo di nodo (questo è `dynamic` o`static`.)

Puoi vedere tutte le funzionalità disponibili per un particolare nodo usando il `scontrol show nodes nodename` comando e controllando l'`AvailableFeatures`elenco.

Un'altra considerazione riguarda i posti di lavoro. Considerate innanzitutto lo stato iniziale del cluster, che potete visualizzare eseguendo il `sinfo` comando.

```
$ sinfo
PARTITION AVAIL  TIMELIMIT  NODES  STATE NODELIST
efa          up   infinite      4  idle~ efa-dy-c5n18xlarge-[1-4]
efa          up   infinite      1   idle efa-st-c5n18xlarge-1
gpu          up   infinite     10  idle~ gpu-dy-g38xlarge-[1-10]
ondemand     up   infinite     20  idle~ ondemand-dy-c52xlarge-[1-10],ondemand-dy-t2xlarge-[1-10]
spot*        up   infinite     13  idle~ spot-dy-c5xlarge-[1-10],spot-dy-t2large-[1-3]
spot*        up   infinite      2   idle spot-st-t2large-[1-2]
```

Nota che `spot` è la coda predefinita. È indicata dal `*` suffisso.

Invia un lavoro a un nodo statico alla coda predefinita ()`spot`.

```
$ sbatch --wrap "sleep 300" -N 1 -C static
```

Invia un lavoro a un nodo dinamico della `EFA` coda.

```
$ sbatch --wrap "sleep 300" -p efa -C dynamic
```

Invia un lavoro a otto (8) `c5.2xlarge` nodi e due (2) `t2.xlarge` nodi alla `ondemand` coda.

```
$ sbatch --wrap "sleep 300" -p ondemand -N 10 -C "[c5.2xlarge*8&t2.xlarge*2]"
```

Invia un lavoro a un nodo GPU della `gpu` coda.

```
$ sbatch --wrap "sleep 300" -p gpu -G 1
```

Consideriamo ora lo stato dei lavori che utilizzano il `squeue` comando.

```
$ squeue
             JOBID PARTITION     NAME     USER ST       TIME  NODES NODELIST(REASON)
                12  ondemand     wrap   ubuntu CF       0:36     10 ondemand-dy-c52xlarge-[1-8],ondemand-dy-t2xlarge-[1-2]
                13       gpu     wrap   ubuntu CF       0:05      1 gpu-dy-g38xlarge-1
                 7      spot     wrap   ubuntu  R       2:48      1 spot-st-t2large-1
                 8       efa     wrap   ubuntu  R       0:39      1 efa-dy-c5n18xlarge-1
```

I lavori 7 e 8 (nelle `efa` code `spot` e) sono già in esecuzione (`R`). I lavori 12 e 13 sono ancora in fase di configurazione (`CF`), probabilmente in attesa che le istanze diventino disponibili.

```
# Nodes states corresponds to state of running jobs
$ sinfo
PARTITION AVAIL  TIMELIMIT  NODES  STATE NODELIST
efa          up   infinite      3  idle~ efa-dy-c5n18xlarge-[2-4]
efa          up   infinite      1    mix efa-dy-c5n18xlarge-1
efa          up   infinite      1   idle efa-st-c5n18xlarge-1
gpu          up   infinite      1   mix~ gpu-dy-g38xlarge-1
gpu          up   infinite      9  idle~ gpu-dy-g38xlarge-[2-10]
ondemand     up   infinite     10   mix# ondemand-dy-c52xlarge-[1-8],ondemand-dy-t2xlarge-[1-2]
ondemand     up   infinite     10  idle~ ondemand-dy-c52xlarge-[9-10],ondemand-dy-t2xlarge-[3-10]
spot*        up   infinite     13  idle~ spot-dy-c5xlarge-[1-10],spot-dy-t2large-[1-3]
spot*        up   infinite      1    mix spot-st-t2large-1
spot*        up   infinite      1   idle spot-st-t2large-2
```

## Stato e caratteristiche del nodo
<a name="multiple-queue-mode-slurm-user-guide-node-state-features"></a>

Nella maggior parte dei casi, gli stati dei nodi sono completamente gestiti in AWS ParallelCluster base ai processi specifici del ciclo di vita dei nodi cloud descritti in precedenza in questo argomento.

Tuttavia, sostituisce o termina AWS ParallelCluster anche nodi non integri in `DRAINED` stati `DOWN` e nodi con istanze di backup non integre. Per ulteriori informazioni, consulta [`clustermgtd`](processes.md#clustermgtd).

## Stati di partizione
<a name="multiple-queue-mode-slurm-user-guide-partition-states"></a>

AWS ParallelCluster supporta i seguenti stati di partizione. Una Slurm partizione è una coda in entrata. AWS ParallelCluster
+ `UP`: indica che la partizione è attiva. Questo è lo stato predefinito di una partizione. In questo stato, tutti i nodi della partizione sono attivi e disponibili per l'uso.
+ `INACTIVE`: indica che la partizione è inattiva. In questo stato, tutte le istanze che supportano i nodi di backup di una partizione inattiva vengono terminate. Non vengono avviate nuove istanze per i nodi in una partizione inattiva.

## avvio e arresto di pcluster
<a name="multiple-queue-mode-slurm-user-guide-pcluster-start-stop"></a>

Quando [`pcluster stop`](pcluster.stop.md) viene eseguito, tutte le partizioni vengono posizionate nello `INACTIVE` stato e i AWS ParallelCluster processi mantengono le partizioni nello stato. `INACTIVE`

Quando [`pcluster start`](pcluster.start.md) viene eseguito, tutte le partizioni vengono inizialmente posizionate nello stato. `UP` Tuttavia, AWS ParallelCluster i processi non mantengono la partizione in uno `UP` stato. È necessario modificare manualmente lo stato delle partizioni. Tutti i nodi statici diventano disponibili dopo pochi minuti. Tieni presente che l'impostazione di una partizione su `UP` non attiva alcuna capacità dinamica. Se [`initial_count`](compute-resource-section.md#compute-resource-initial-count) è maggiore di[`max_count`](compute-resource-section.md#compute-resource-max-count), [`initial_count`](compute-resource-section.md#compute-resource-initial-count) potrebbe non essere soddisfatto quando lo stato della partizione viene modificato allo `UP` stato.

Quando [`pcluster start`](pcluster.start.md) e [`pcluster stop`](pcluster.stop.md) sono in esecuzione, è possibile verificare lo stato del cluster eseguendo il [`pcluster status`](pcluster.status.md) comando e controllando. `ComputeFleetStatus` Di seguito sono elencati gli stati possibili:
+ `STOP_REQUESTED`: La [`pcluster stop`](pcluster.stop.md) richiesta viene inviata al cluster.
+ `STOPPING`: il `pcluster` processo sta attualmente arrestando il cluster.
+ `STOPPED`: Il `pcluster` processo ha terminato il processo di arresto, tutte le partizioni sono in `INACTIVE` stato e tutte le istanze di calcolo sono terminate.
+ `START_REQUESTED`: La [`pcluster start`](pcluster.start.md) richiesta viene inviata al cluster.
+ `STARTING`: Il `pcluster` processo sta attualmente avviando il cluster
+ `RUNNING`: Il `pcluster` processo ha completato il processo di avvio, tutte le partizioni sono nello `UP` stato attuale e i nodi statici saranno disponibili dopo alcuni minuti.

## Controllo manuale delle code
<a name="multiple-queue-mode-slurm-user-guide-manual-control-queue"></a>

In alcuni casi, potresti voler avere un certo controllo manuale sui nodi o sulla coda (nota come partizione inSlurm) in un cluster. È possibile gestire i nodi in un cluster tramite le seguenti procedure comuni.
+ Accendi i nodi dinamici in `POWER_SAVING` stato: esegui il `scontrol update nodename=nodename state=power_up` comando o invia una richiesta di `sleep 1` lavoro segnaposto per un determinato numero di nodi e affidati Slurm a questa opzione per attivare il numero richiesto di nodi.
+ Spegni prima i nodi dinamici[`scaledown_idletime`](scaling-section.md#scaledown-idletime): imposta i nodi dinamici su `DOWN` con il comando. `scontrol update nodename=nodename state=down` AWS ParallelCluster termina e ripristina automaticamente i nodi dinamici disattivati. In generale, non è consigliabile impostare i nodi per utilizzare `POWER_DOWN` direttamente il comando. `scontrol update nodename=nodename state=power_down` Questo perché gestisce AWS ParallelCluster automaticamente il processo di spegnimento. Non è necessario alcun intervento manuale. Pertanto, ti consigliamo di provare a impostare i nodi `DOWN` ogni volta che è possibile.
+ Disabilita una coda (partizione) o ferma tutti i nodi statici in una partizione specifica: imposta la coda in modo `INACTIVE` specifico con il comando. `scontrol update partition=queue name state=inactive` In questo modo si interrompono tutte le istanze che supportano i nodi nella partizione.
+ Abilita una coda (partizione): imposta la coda in modo specifico con il comando. `INACTIVE` `scontrol update partition=queue name state=up`

## Comportamento e regolazioni di ridimensionamento
<a name="multiple-queue-mode-slurm-user-guide-scaling-behavior"></a>

Ecco un esempio del normale flusso di lavoro di ridimensionamento:
+ Lo scheduler riceve un lavoro che richiede due nodi.
+ Lo scheduler trasferisce due nodi in uno `POWER_UP` stato e chiama `ResumeProgram` con i nomi dei nodi (ad esempio). `queue1-dy-c5xlarge-[1-2]`
+ `ResumeProgram`avvia due istanze EC2 e assegna gli indirizzi IP e i nomi host privati di`queue1-dy-c5xlarge-[1-2]`, aspettando `ResumeTimeout` (il periodo predefinito è 60 minuti (1 ora)) prima di reimpostare i nodi.
+ Le istanze vengono configurate e si uniscono al cluster. Job inizia a essere eseguito su istanze.
+ Job è finito.
+ Al termine della configurazione `SuspendTime` (che è impostata su[`scaledown_idletime`](scaling-section.md#scaledown-idletime)), le istanze vengono inserite `POWER_SAVING` nello stato dallo scheduler. Lo scheduler `queue1-dy-c5xlarge-[1-2]` inserisce `POWER_DOWN` lo stato e chiama `SuspendProgram` con i nomi dei nodi.
+ `SuspendProgram`viene chiamato per due nodi. I nodi rimangono nello `POWER_DOWN` stato, ad esempio, rimanendo `idle%` per a `SuspendTimeout` (il periodo predefinito è 120 secondi (2 minuti)). Dopo aver `clustermgtd` rilevato che i nodi si stanno spegnendo, interrompe le istanze di backup. Quindi, si configura `queue1-dy-c5xlarge-[1-2]` in stato inattivo e reimposta l'indirizzo IP privato e il nome host in modo che possano essere riaccesi per lavori futuri.

Ora, se qualcosa va storto e un'istanza per un particolare nodo non può essere avviata per qualche motivo, succede quanto segue.
+ Scheduler riceve un lavoro che richiede due nodi.
+ Scheduler imposta `POWER_UP` lo stato di due nodi di cloud bursting e chiama `ResumeProgram` con i nomi dei nodi, (ad esempio). `queue1-dy-c5xlarge-[1-2]`
+ `ResumeProgram`avvia solo una (1) istanza EC2 e la configura`queue1-dy-c5xlarge-1`, ma non è riuscito ad avviare un'istanza per. `queue1-dy-c5xlarge-2`
+ `queue1-dy-c5xlarge-1`non sarà interessato e tornerà online dopo aver raggiunto lo stato. `POWER_UP`
+ `queue1-dy-c5xlarge-2`viene inserito in `POWER_DOWN` uno stato e il processo viene richiesto automaticamente perché Slurm rileva un errore del nodo.
+ `queue1-dy-c5xlarge-2`diventa disponibile dopo `SuspendTimeout` (l'impostazione predefinita è 120 secondi (2 minuti)). Nel frattempo, il processo viene richiesto e può iniziare a essere eseguito su un altro nodo.
+ Il processo precedente viene ripetuto finché il processo non può essere eseguito su un nodo disponibile senza che si verifichi un errore.

Esistono due parametri di temporizzazione che possono essere regolati se necessario.
+ `ResumeTimeout`(l'impostazione predefinita è 60 minuti (1 ora)): `ResumeTimeout` controlla il tempo di Slurm attesa prima di disattivare il nodo.
  + Potrebbe essere utile estendere questa impostazione se il processo di pre/post installazione richiede quasi così tanto tempo.
  + Questo è anche il tempo massimo di AWS ParallelCluster attesa prima di sostituire o resettare un nodo in caso di problemi. I nodi di calcolo si interrompono automaticamente se si verifica un errore durante l'avvio o la configurazione. Successivamente, AWS ParallelCluster i processi sostituiscono il nodo anche quando rileva che l'istanza è terminata.
+ `SuspendTimeout`(l'impostazione predefinita è 120 secondi (2 minuti)): `SuspendTimeout` controlla la velocità con cui i nodi vengono reinseriti nel sistema e pronti per l'uso.
  + Un valore più corto `SuspendTimeout` significherebbe che i nodi verranno ripristinati più rapidamente ed Slurm è in grado di provare ad avviare le istanze più frequentemente.
  + Un valore più lungo `SuspendTimeout` rende più lenta la reimpostazione dei nodi guasti. Nel frattempo, prova a Slurm usare altri nodi. Se `SuspendTimeout` dura più di qualche minuto, Slurm prova a scorrere ciclicamente tra tutti i nodi del sistema. Un periodo più lungo `SuspendTimeout` potrebbe essere utile per i sistemi su larga scala (oltre 1.000 nodi) per ridurre lo stress dovuto alla frequente ricoda dei Slurm lavori che falliscono.
  + Tieni presente che `SuspendTimeout` non si riferisce al tempo impiegato per terminare un'istanza AWS ParallelCluster di backup per un nodo. Le istanze di backup per `power down` i nodi vengono immediatamente terminate. Il processo di terminazione di solito termina in pochi minuti. Tuttavia, durante questo periodo, il nodo rimane nello stato di spegnimento e non è disponibile per l'uso nello scheduler.

## Registri per la nuova architettura
<a name="multiple-queue-mode-slurm-user-guide-logs"></a>

L'elenco seguente contiene i log delle chiavi per l'architettura a code multiple. Il nome del flusso di log utilizzato con Amazon CloudWatch Logs ha il formato `{hostname}.{instance_id}.{logIdentifier}` *logIdentifier* seguente i nomi di log. Per ulteriori informazioni, consulta [Integrazione con Amazon CloudWatch Logs](cloudwatch-logs.md).
+ `ResumeProgram`:

  `/var/log/parallelcluster/slurm_resume.log` (`slurm_resume`)
+ `SuspendProgram`:

  `/var/log/parallelcluster/slurm_suspend.log` (`slurm_suspend`)
+ `clustermgtd`:

  `/var/log/parallelcluster/clustermgtd.log` (`clustermgtd`)
+ `computemgtd`:

  `/var/log/parallelcluster/computemgtd.log` (`computemgtd`)
+ `slurmctld`:

  `/var/log/slurmctld.log` (`slurmctld`)
+ `slurmd`:

  `/var/log/slurmd.log` (`slurmd`)

## Problemi comuni e modalità di debug:
<a name="multiple-queue-mode-slurm-user-guide-common-issues"></a>

**Nodi che non sono riusciti ad avviare, accendere o unirsi al cluster:**
+ Nodi dinamici:
  + Controlla il `ResumeProgram` registro per vedere se `ResumeProgram` è mai stato chiamato con il nodo. In caso contrario, controlla il `slurmctld` registro per determinare se hai Slurm mai provato a chiamare `ResumeProgram` con il nodo. Tieni presente che autorizzazioni errate `ResumeProgram` potrebbero causare l'interruzione automatica del programma.
  + Se `ResumeProgram` viene chiamato, controlla se è stata lanciata un'istanza per il nodo. Se l'istanza non può essere avviata, dovrebbe apparire un messaggio di errore chiaro sul motivo per cui l'istanza non è stata avviata.
  + Se è stata avviata un'istanza, è possibile che si sia verificato qualche problema durante il processo di bootstrap. Trova l'indirizzo IP privato e l'ID dell'istanza corrispondenti dal `ResumeProgram` registro e guarda i registri di bootstrap corrispondenti per l'istanza specifica in Logs. CloudWatch 
+ Nodi statici:
  + Controlla il `clustermgtd` registro per vedere se sono state avviate istanze per il nodo. In caso contrario, dovrebbero esserci errori evidenti sul motivo per cui le istanze non sono state avviate.
  + Se è stata avviata un'istanza, c'è qualche problema durante il processo di bootstrap. Trova l'IP privato e l'ID dell'istanza corrispondenti dal `clustermgtd` registro e guarda i registri di bootstrap corrispondenti per l'istanza specifica in Logs. CloudWatch 

**Nodi sostituiti o terminati in modo imprevisto, guasti dei nodi**
+  replaced/terminated Nodi in modo imprevisto
  + Nella maggior parte dei casi, `clustermgtd` gestisce tutte le azioni di manutenzione dei nodi. Per verificare se un nodo è stato `clustermgtd` sostituito o interrotto, controlla il `clustermgtd` registro.
  + Se il nodo è stato `clustermgtd` sostituito o terminato, dovrebbe apparire un messaggio che indica il motivo dell'azione. Se il motivo è legato allo scheduler (ad esempio, il nodo lo era`DOWN`), controlla il `slurmctld` registro per maggiori dettagli. Se il motivo è correlato a EC2,  utilizza gli strumenti per controllare lo stato o i log di quell'istanza. Ad esempio, puoi verificare se l'istanza aveva eventi pianificati o se i controlli dello stato di integrità di EC2 non sono stati superati.
  + Se `clustermgtd` non ha terminato il nodo, controlla se ha `computemgtd` terminato il nodo o se EC2 ha terminato l'istanza per recuperare un'istanza Spot.
+ Guasti del nodo
  + Nella maggior parte dei casi, i lavori vengono richiesti automaticamente in caso di errore di un nodo. Esamina nel `slurmctld` registro il motivo per cui un job o un nodo non è riuscito e analizza la situazione da lì.

**Guasto durante la sostituzione o la chiusura delle istanze, errore durante lo spegnimento dei nodi**
+ In generale, `clustermgtd` gestisce tutte le azioni di terminazione previste dell'istanza. Guarda nel `clustermgtd` registro per vedere perché non è riuscito a sostituire o terminare un nodo.
+ Se i nodi dinamici non funzionano correttamente[`scaledown_idletime`](scaling-section.md#scaledown-idletime), guarda nel `SuspendProgram` registro per vedere se un programma utilizza il nodo specifico come argomento. `slurmctld` Note in realtà `SuspendProgram` non esegue alcuna azione specifica. Piuttosto, registra solo quando viene chiamato. La terminazione e il `NodeAddr` ripristino di tutte le istanze vengono completati da. `clustermgtd` Slurminserisce i nodi in `IDLE` after`SuspendTimeout`.

**Altri problemi**
+ AWS ParallelCluster non prende decisioni sull'allocazione del lavoro o sulla scalabilità. Tenta semplicemente di avviare, terminare e mantenere le risorse in base alle Slurm istruzioni fornite.

  Per problemi relativi all'allocazione dei lavori, all'allocazione dei nodi e alla decisione sulla scalabilità, consulta il `slurmctld` registro per individuare eventuali errori. 