az synapse spark pool
Verwalten von Spark-Pools.
Befehle
| Name | Beschreibung | Typ | Status |
|---|---|---|---|
| az synapse spark pool create |
Erstellen Sie einen Spark-Pool. |
Core | GA |
| az synapse spark pool delete |
Löschen sie einen Spark-Pool. |
Core | GA |
| az synapse spark pool list |
Alle Spark-Pools auflisten. |
Core | GA |
| az synapse spark pool show |
Abrufen eines Spark-Pools. |
Core | GA |
| az synapse spark pool update |
Aktualisieren Sie den Spark-Pool. |
Core | GA |
| az synapse spark pool wait |
Platzieren Sie die CLI in einem Wartezustand, bis eine Bedingung eines Spark-Pools erfüllt ist. |
Core | GA |
az synapse spark pool create
Erstellen Sie einen Spark-Pool.
az synapse spark pool create --name
--node-count
--node-size {Large, Medium, None, Small, XLarge, XXLarge, XXXLarge}
--resource-group
--spark-version
--workspace-name
[--delay]
[--enable-auto-pause {false, true}]
[--enable-auto-scale {false, true}]
[--enable-dynamic-exec {false, true}]
[--max-executors]
[--max-node-count]
[--min-executors]
[--min-node-count]
[--no-wait]
[--node-size-family {HardwareAcceleratedFPGA, HardwareAcceleratedGPU, MemoryOptimized, None}]
[--spark-config-file-path]
[--spark-events-folder]
[--spark-log-folder]
[--tags]
Beispiele
Erstellen Sie einen Spark-Pool.
az synapse spark pool create --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--spark-version 2.4 --node-count 3 --node-size Medium --spark-config-file-path 'path/configfile.txt'
Erforderliche Parameter
Der Name des Spark-Pools.
Die Anzahl des Knotens.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Node Arguments |
Die Berechnungsleistung, über die jeder Knoten im Big Data-Pool verfügt.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Node Arguments |
| Zulässige Werte: | Large, Medium, None, Small, XLarge, XXLarge, XXXLarge |
Name der Ressourcengruppe. Sie können die Standardgruppe mit az configure --defaults group=<name>konfigurieren.
Die unterstützte Spark-Version ist jetzt 2.4.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Component Version Arguments |
Der Arbeitsbereichsname.
Optionale Parameter
Die folgenden Parameter sind optional, aber je nach Kontext kann mindestens ein Parameter erforderlich sein, damit der Befehl erfolgreich ausgeführt werden kann.
Die Verzögerungszeit, deren Einheit Minute ist.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | AutoPause Arguments |
Die Kennzeichnung zum Aktivieren der automatischen Pause.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | AutoPause Arguments |
| Zulässige Werte: | false, true |
Die Kennzeichnung zum Aktivieren der automatischen Skalierung.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | AutoScale Arguments |
| Zulässige Werte: | false, true |
Gibt an, ob die dynamische Executorzuordnung aktiviert ist oder nicht.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | DynamicExecutor Arguments |
| Zulässige Werte: | false, true |
Die maximale Anzahl von Vollzugsausführern, die ausgestrahlt wurden.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | DynamicExecutor Arguments |
Die maximale Knotenanzahl.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | AutoScale Arguments |
Die Mindestanzahl der Vollzugsausführer.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | DynamicExecutor Arguments |
Die Min.-Knotenanzahl.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | AutoScale Arguments |
Warten Sie nicht, bis der lange ausgeführte Vorgang abgeschlossen ist.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
Die Art der Knoten, die der Big Data-Pool bereitstellt.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Node Arguments |
| Standardwert: | MemoryOptimized |
| Zulässige Werte: | HardwareAcceleratedFPGA, HardwareAcceleratedGPU, MemoryOptimized, None |
Absoluter Pfad der Konfigurationsdatei für Spark pool-Eigenschaften.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Environment Configuration Arguments |
Der Ordner "Spark-Ereignisse".
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Default Folder Arguments |
| Standardwert: | /events |
Der Standardmäßige Spark-Protokollordner.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Default Folder Arguments |
| Standardwert: | /logs |
Durch Leerzeichen getrennte Tags: key[=value] [key[=value] ...]. Verwenden Sie "", um vorhandene Tags zu löschen.
Globale Parameter
Erhöhen Sie die Ausführlichkeit der Protokollierung, um alle Debugprotokolle anzuzeigen.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
Diese Hilfemeldung anzeigen und schließen.
Nur Fehler anzeigen, Warnungen unterdrücken.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
Ausgabeformat.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | json |
| Zulässige Werte: | json, jsonc, none, table, tsv, yaml, yamlc |
JMESPath-Abfragezeichenfolge. Weitere Informationen und Beispiele finden Sie unter http://jmespath.org/.
Name oder ID des Abonnements. Sie können das Standardabonnement mithilfe von az account set -s NAME_OR_IDkonfigurieren.
Erhöhen Sie die Ausführlichkeit der Protokollierung. Verwenden Sie "-debug" für vollständige Debugprotokolle.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
az synapse spark pool delete
Löschen sie einen Spark-Pool.
az synapse spark pool delete [--ids]
[--name]
[--no-wait]
[--resource-group]
[--subscription]
[--workspace-name]
[--yes]
Beispiele
Löschen sie einen Spark-Pool.
az synapse spark pool delete --name testpool --workspace-name testsynapseworkspace --resource-group rg
Optionale Parameter
Die folgenden Parameter sind optional, aber je nach Kontext kann mindestens ein Parameter erforderlich sein, damit der Befehl erfolgreich ausgeführt werden kann.
Mindestens eine Ressourcen-IDs (durch Leerzeichen getrennt). Dabei sollte es sich um eine vollständige Ressourcen-ID mit allen Informationen der Argumente "Ressourcen-ID" sein. Sie sollten entweder --ids oder andere Argumente für die Ressourcen-ID angeben.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Resource Id Arguments |
Der Name des Spark-Pools.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Resource Id Arguments |
Warten Sie nicht, bis der lange ausgeführte Vorgang abgeschlossen ist.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
Name der Ressourcengruppe. Sie können die Standardgruppe mit az configure --defaults group=<name>konfigurieren.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Resource Id Arguments |
Name oder ID des Abonnements. Sie können das Standardabonnement mithilfe von az account set -s NAME_OR_IDkonfigurieren.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Resource Id Arguments |
Der Arbeitsbereichsname.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Resource Id Arguments |
Zur Bestätigung nicht auffordern.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
Globale Parameter
Erhöhen Sie die Ausführlichkeit der Protokollierung, um alle Debugprotokolle anzuzeigen.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
Diese Hilfemeldung anzeigen und schließen.
Nur Fehler anzeigen, Warnungen unterdrücken.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
Ausgabeformat.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | json |
| Zulässige Werte: | json, jsonc, none, table, tsv, yaml, yamlc |
JMESPath-Abfragezeichenfolge. Weitere Informationen und Beispiele finden Sie unter http://jmespath.org/.
Erhöhen Sie die Ausführlichkeit der Protokollierung. Verwenden Sie "-debug" für vollständige Debugprotokolle.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
az synapse spark pool list
Alle Spark-Pools auflisten.
az synapse spark pool list --resource-group
--workspace-name
Beispiele
Alle Spark-Pools auflisten.
az synapse spark pool list --workspace-name testsynapseworkspace --resource-group rg
Erforderliche Parameter
Name der Ressourcengruppe. Sie können die Standardgruppe mit az configure --defaults group=<name>konfigurieren.
Der Arbeitsbereichsname.
Globale Parameter
Erhöhen Sie die Ausführlichkeit der Protokollierung, um alle Debugprotokolle anzuzeigen.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
Diese Hilfemeldung anzeigen und schließen.
Nur Fehler anzeigen, Warnungen unterdrücken.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
Ausgabeformat.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | json |
| Zulässige Werte: | json, jsonc, none, table, tsv, yaml, yamlc |
JMESPath-Abfragezeichenfolge. Weitere Informationen und Beispiele finden Sie unter http://jmespath.org/.
Name oder ID des Abonnements. Sie können das Standardabonnement mithilfe von az account set -s NAME_OR_IDkonfigurieren.
Erhöhen Sie die Ausführlichkeit der Protokollierung. Verwenden Sie "-debug" für vollständige Debugprotokolle.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
az synapse spark pool show
Abrufen eines Spark-Pools.
az synapse spark pool show [--ids]
[--name]
[--resource-group]
[--subscription]
[--workspace-name]
Beispiele
Abrufen eines Spark-Pools.
az synapse spark pool show --name testpool --workspace-name testsynapseworkspace --resource-group rg
Optionale Parameter
Die folgenden Parameter sind optional, aber je nach Kontext kann mindestens ein Parameter erforderlich sein, damit der Befehl erfolgreich ausgeführt werden kann.
Mindestens eine Ressourcen-IDs (durch Leerzeichen getrennt). Dabei sollte es sich um eine vollständige Ressourcen-ID mit allen Informationen der Argumente "Ressourcen-ID" sein. Sie sollten entweder --ids oder andere Argumente für die Ressourcen-ID angeben.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Resource Id Arguments |
Der Name des Spark-Pools.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Resource Id Arguments |
Name der Ressourcengruppe. Sie können die Standardgruppe mit az configure --defaults group=<name>konfigurieren.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Resource Id Arguments |
Name oder ID des Abonnements. Sie können das Standardabonnement mithilfe von az account set -s NAME_OR_IDkonfigurieren.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Resource Id Arguments |
Der Arbeitsbereichsname.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Resource Id Arguments |
Globale Parameter
Erhöhen Sie die Ausführlichkeit der Protokollierung, um alle Debugprotokolle anzuzeigen.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
Diese Hilfemeldung anzeigen und schließen.
Nur Fehler anzeigen, Warnungen unterdrücken.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
Ausgabeformat.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | json |
| Zulässige Werte: | json, jsonc, none, table, tsv, yaml, yamlc |
JMESPath-Abfragezeichenfolge. Weitere Informationen und Beispiele finden Sie unter http://jmespath.org/.
Erhöhen Sie die Ausführlichkeit der Protokollierung. Verwenden Sie "-debug" für vollständige Debugprotokolle.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
az synapse spark pool update
Aktualisieren Sie den Spark-Pool.
az synapse spark pool update [--delay]
[--enable-auto-pause {false, true}]
[--enable-auto-scale {false, true}]
[--enable-dynamic-exec {false, true}]
[--force {false, true}]
[--ids]
[--library-requirements]
[--max-executors]
[--max-node-count]
[--min-executors]
[--min-node-count]
[--name]
[--no-wait]
[--node-count]
[--node-size {Large, Medium, None, Small, XLarge, XXLarge, XXXLarge}]
[--package]
[--package-action {Add, Remove}]
[--resource-group]
[--spark-config-file-path]
[--subscription]
[--tags]
[--workspace-name]
Beispiele
Aktualisieren Sie die Tags des Spark-Pools.
az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--tags key1=value1
Aktualisieren Sie die Automatische Skalierungskonfiguration des Spark-Pools.
az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--enable-auto-scale --min-node-count 3 --max-node-count 100
Aktualisieren Sie die benutzerdefinierten Bibliotheken des Spark-Pools.
az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--package-action Add --package package1.jar package2.jar
Aktualisieren Sie die Konfigurationsdatei des Spark-Pools.
az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--spark-config-file-path 'path/configfile.txt'
Aktualisieren Sie die dynamische Ausführungskonfiguration des Sparkpools.
az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--enable-dynamic-exec --min-executors 3 --max-executors 10
Optionale Parameter
Die folgenden Parameter sind optional, aber je nach Kontext kann mindestens ein Parameter erforderlich sein, damit der Befehl erfolgreich ausgeführt werden kann.
Die Verzögerungszeit, deren Einheit Minute ist.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | AutoPause Arguments |
Die Kennzeichnung zum Aktivieren der automatischen Pause.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | AutoPause Arguments |
| Zulässige Werte: | false, true |
Die Kennzeichnung zum Aktivieren der automatischen Skalierung.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | AutoScale Arguments |
| Zulässige Werte: | false, true |
Gibt an, ob die dynamische Executorzuordnung aktiviert ist oder nicht.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | DynamicExecutor Arguments |
| Zulässige Werte: | false, true |
Die Kennzeichnung des Force-Vorgangs.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
| Zulässige Werte: | false, true |
Mindestens eine Ressourcen-IDs (durch Leerzeichen getrennt). Dabei sollte es sich um eine vollständige Ressourcen-ID mit allen Informationen der Argumente "Ressourcen-ID" sein. Sie sollten entweder --ids oder andere Argumente für die Ressourcen-ID angeben.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Resource Id Arguments |
Die Bibliotheksanforderungendatei.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Environment Configuration Arguments |
Die maximale Anzahl von Vollzugsausführern, die ausgestrahlt wurden.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | DynamicExecutor Arguments |
Die maximale Knotenanzahl.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | AutoScale Arguments |
Die Mindestanzahl der Vollzugsausführer.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | DynamicExecutor Arguments |
Die Min.-Knotenanzahl.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | AutoScale Arguments |
Der Name des Spark-Pools.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Resource Id Arguments |
Warten Sie nicht, bis der lange ausgeführte Vorgang abgeschlossen ist.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
Die Anzahl des Knotens.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Node Arguments |
Die Berechnungsleistung, über die jeder Knoten im Big Data-Pool verfügt.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Node Arguments |
| Zulässige Werte: | Large, Medium, None, Small, XLarge, XXLarge, XXXLarge |
Liste der Arbeitsbereichspakete.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Custom Libraries Arguments |
Die Paketaktion muss angegeben werden, wenn Sie ein Arbeitsbereichspaket aus einem Apache Spark-Pool hinzufügen oder entfernen.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Custom Libraries Arguments |
| Zulässige Werte: | Add, Remove |
Name der Ressourcengruppe. Sie können die Standardgruppe mit az configure --defaults group=<name>konfigurieren.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Resource Id Arguments |
Absoluter Pfad der Konfigurationsdatei für Spark pool-Eigenschaften.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Environment Configuration Arguments |
Name oder ID des Abonnements. Sie können das Standardabonnement mithilfe von az account set -s NAME_OR_IDkonfigurieren.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Resource Id Arguments |
Durch Leerzeichen getrennte Tags: key[=value] [key[=value] ...]. Verwenden Sie "", um vorhandene Tags zu löschen.
Der Arbeitsbereichsname.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Resource Id Arguments |
Globale Parameter
Erhöhen Sie die Ausführlichkeit der Protokollierung, um alle Debugprotokolle anzuzeigen.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
Diese Hilfemeldung anzeigen und schließen.
Nur Fehler anzeigen, Warnungen unterdrücken.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
Ausgabeformat.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | json |
| Zulässige Werte: | json, jsonc, none, table, tsv, yaml, yamlc |
JMESPath-Abfragezeichenfolge. Weitere Informationen und Beispiele finden Sie unter http://jmespath.org/.
Erhöhen Sie die Ausführlichkeit der Protokollierung. Verwenden Sie "-debug" für vollständige Debugprotokolle.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
az synapse spark pool wait
Platzieren Sie die CLI in einem Wartezustand, bis eine Bedingung eines Spark-Pools erfüllt ist.
az synapse spark pool wait --big-data-pool-name
[--created]
[--custom]
[--deleted]
[--exists]
[--ids]
[--interval]
[--resource-group]
[--subscription]
[--timeout]
[--updated]
[--workspace-name]
Erforderliche Parameter
Name des Big Data-Pools.
Optionale Parameter
Die folgenden Parameter sind optional, aber je nach Kontext kann mindestens ein Parameter erforderlich sein, damit der Befehl erfolgreich ausgeführt werden kann.
Warten Sie, bis sie mit 'provisioningState' unter 'Succeeded' erstellt wurde.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Wait Condition Arguments |
| Standardwert: | False |
Warten Sie, bis die Bedingung eine benutzerdefinierte JMESPath-Abfrage erfüllt. Beispiel: provisioningState!='InProgress', instanceView.statuses[?code=='PowerState/running'].
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Wait Condition Arguments |
Warten Sie, bis sie gelöscht wurde.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Wait Condition Arguments |
| Standardwert: | False |
Warten Sie, bis die Ressource vorhanden ist.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Wait Condition Arguments |
| Standardwert: | False |
Mindestens eine Ressourcen-IDs (durch Leerzeichen getrennt). Dabei sollte es sich um eine vollständige Ressourcen-ID mit allen Informationen der Argumente "Ressourcen-ID" sein. Sie sollten entweder --ids oder andere Argumente für die Ressourcen-ID angeben.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Resource Id Arguments |
Abrufintervall in Sekunden.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Wait Condition Arguments |
| Standardwert: | 30 |
Name der Ressourcengruppe. Sie können die Standardgruppe mit az configure --defaults group=<name>konfigurieren.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Resource Id Arguments |
Name oder ID des Abonnements. Sie können das Standardabonnement mithilfe von az account set -s NAME_OR_IDkonfigurieren.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Resource Id Arguments |
Maximale Wartezeit in Sekunden.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Wait Condition Arguments |
| Standardwert: | 3600 |
Warten Sie, bis sie mit provisioningState unter 'Succeeded' aktualisiert wurde.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Wait Condition Arguments |
| Standardwert: | False |
Der Arbeitsbereichsname.
| Eigenschaft | Wert |
|---|---|
| Parametergruppe: | Resource Id Arguments |
Globale Parameter
Erhöhen Sie die Ausführlichkeit der Protokollierung, um alle Debugprotokolle anzuzeigen.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
Diese Hilfemeldung anzeigen und schließen.
Nur Fehler anzeigen, Warnungen unterdrücken.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |
Ausgabeformat.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | json |
| Zulässige Werte: | json, jsonc, none, table, tsv, yaml, yamlc |
JMESPath-Abfragezeichenfolge. Weitere Informationen und Beispiele finden Sie unter http://jmespath.org/.
Erhöhen Sie die Ausführlichkeit der Protokollierung. Verwenden Sie "-debug" für vollständige Debugprotokolle.
| Eigenschaft | Wert |
|---|---|
| Standardwert: | False |