Udostępnij przez


az synapse spark pool

Zarządzanie pulami platformy Spark.

Polecenia

Nazwa Opis Typ Stan
az synapse spark pool create

Utwórz pulę platformy Spark.

Core ogólna dostępność
az synapse spark pool delete

Usuń pulę platformy Spark.

Core ogólna dostępność
az synapse spark pool list

Wyświetl listę wszystkich pul platformy Spark.

Core ogólna dostępność
az synapse spark pool show

Pobierz pulę platformy Spark.

Core ogólna dostępność
az synapse spark pool update

Zaktualizuj pulę platformy Spark.

Core ogólna dostępność
az synapse spark pool wait

Umieść interfejs wiersza polecenia w stanie oczekiwania do momentu spełnienia warunku puli platformy Spark.

Core ogólna dostępność

az synapse spark pool create

Utwórz pulę platformy Spark.

az synapse spark pool create --name
                             --node-count
                             --node-size {Large, Medium, None, Small, XLarge, XXLarge, XXXLarge}
                             --resource-group
                             --spark-version
                             --workspace-name
                             [--delay]
                             [--enable-auto-pause {false, true}]
                             [--enable-auto-scale {false, true}]
                             [--enable-dynamic-exec {false, true}]
                             [--max-executors]
                             [--max-node-count]
                             [--min-executors]
                             [--min-node-count]
                             [--no-wait]
                             [--node-size-family {HardwareAcceleratedFPGA, HardwareAcceleratedGPU, MemoryOptimized, None}]
                             [--spark-config-file-path]
                             [--spark-events-folder]
                             [--spark-log-folder]
                             [--tags]

Przykłady

Utwórz pulę platformy Spark.

az synapse spark pool create --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--spark-version 2.4 --node-count 3 --node-size Medium --spark-config-file-path 'path/configfile.txt'

Parametry wymagane

--name -n

Nazwa puli Spark.

--node-count

Liczba węzłów.

Właściwość Wartość
Grupa parametrów: Node Arguments
--node-size

Poziom mocy obliczeniowej, którą ma każdy węzeł w puli danych big data.

Właściwość Wartość
Grupa parametrów: Node Arguments
Dopuszczalne wartości: Large, Medium, None, Small, XLarge, XXLarge, XXXLarge
--resource-group -g

Nazwa grupy zasobów. Grupę domyślną można skonfigurować przy użyciu az configure --defaults group=<name>.

--spark-version

Obsługiwana wersja platformy Spark to teraz 2.4.

Właściwość Wartość
Grupa parametrów: Component Version Arguments
--workspace-name

Nazwa obszaru roboczego.

Parametry opcjonalne

Poniższe parametry są opcjonalne, ale w zależności od kontekstu co najmniej jeden może być wymagany do pomyślnego wykonania polecenia.

--delay

Czas opóźnienia, którego jednostka to minuta.

Właściwość Wartość
Grupa parametrów: AutoPause Arguments
--enable-auto-pause

Flaga włączania automatycznego wstrzymywania.

Właściwość Wartość
Grupa parametrów: AutoPause Arguments
Dopuszczalne wartości: false, true
--enable-auto-scale

Flaga włączania automatycznego skalowania.

Właściwość Wartość
Grupa parametrów: AutoScale Arguments
Dopuszczalne wartości: false, true
--enable-dynamic-exec

Wskazuje, czy dynamiczna alokacja funkcji wykonawczej jest włączona, czy nie.

Właściwość Wartość
Grupa parametrów: DynamicExecutor Arguments
Dopuszczalne wartości: false, true
--max-executors

Maksymalna liczba przyłożonej liczby funkcji wykonawczych.

Właściwość Wartość
Grupa parametrów: DynamicExecutor Arguments
--max-node-count

Maksymalna liczba węzłów.

Właściwość Wartość
Grupa parametrów: AutoScale Arguments
--min-executors

Minimalna liczba alokowanych funkcji wykonawczych.

Właściwość Wartość
Grupa parametrów: DynamicExecutor Arguments
--min-node-count

Minimalna liczba węzłów.

Właściwość Wartość
Grupa parametrów: AutoScale Arguments
--no-wait

Nie czekaj na zakończenie długotrwałej operacji.

Właściwość Wartość
Domyślna wartość: False
--node-size-family

Rodzaj węzłów zapewnianych przez pulę danych big data.

Właściwość Wartość
Grupa parametrów: Node Arguments
Domyślna wartość: MemoryOptimized
Dopuszczalne wartości: HardwareAcceleratedFPGA, HardwareAcceleratedGPU, MemoryOptimized, None
--spark-config-file-path

Ścieżka bezwzględna pliku konfiguracji właściwości puli platformy Spark.

Właściwość Wartość
Grupa parametrów: Environment Configuration Arguments
--spark-events-folder

Folder zdarzeń platformy Spark.

Właściwość Wartość
Grupa parametrów: Default Folder Arguments
Domyślna wartość: /events
--spark-log-folder

Domyślny folder dziennika platformy Spark.

Właściwość Wartość
Grupa parametrów: Default Folder Arguments
Domyślna wartość: /logs
--tags

Tagi rozdzielone spacjami: klucz[=wartość] [key[=value] ...]. Użyj ciągu "", aby wyczyścić istniejące tagi.

Parametry globalne
--debug

Zwiększ szczegółowość rejestrowania, aby wyświetlić wszystkie dzienniki debugowania.

Właściwość Wartość
Domyślna wartość: False
--help -h

Pokaż ten komunikat pomocy i zakończ pracę.

--only-show-errors

Pokaż tylko błędy, pomijając ostrzeżenia.

Właściwość Wartość
Domyślna wartość: False
--output -o

Format danych wyjściowych.

Właściwość Wartość
Domyślna wartość: json
Dopuszczalne wartości: json, jsonc, none, table, tsv, yaml, yamlc
--query

Ciąg zapytania JMESPath. Zobacz http://jmespath.org/ , aby uzyskać więcej informacji i przykładów.

--subscription

Nazwa lub identyfikator subskrypcji. Subskrypcję domyślną można skonfigurować przy użyciu az account set -s NAME_OR_ID.

--verbose

Zwiększ szczegółowość rejestrowania. Użyj --debuguj, aby uzyskać pełne dzienniki debugowania.

Właściwość Wartość
Domyślna wartość: False

az synapse spark pool delete

Usuń pulę platformy Spark.

az synapse spark pool delete [--ids]
                             [--name]
                             [--no-wait]
                             [--resource-group]
                             [--subscription]
                             [--workspace-name]
                             [--yes]

Przykłady

Usuń pulę platformy Spark.

az synapse spark pool delete --name testpool --workspace-name testsynapseworkspace --resource-group rg

Parametry opcjonalne

Poniższe parametry są opcjonalne, ale w zależności od kontekstu co najmniej jeden może być wymagany do pomyślnego wykonania polecenia.

--ids

Co najmniej jeden identyfikator zasobu (rozdzielany spacjami). Powinien to być kompletny identyfikator zasobu, zawierający wszystkie informacje dotyczące argumentów „Identyfikator zasobu”. Należy podać argumenty --ids lub inne argumenty "Identyfikator zasobu".

Właściwość Wartość
Grupa parametrów: Resource Id Arguments
--name -n

Nazwa puli Spark.

Właściwość Wartość
Grupa parametrów: Resource Id Arguments
--no-wait

Nie czekaj na zakończenie długotrwałej operacji.

Właściwość Wartość
Domyślna wartość: False
--resource-group -g

Nazwa grupy zasobów. Grupę domyślną można skonfigurować przy użyciu az configure --defaults group=<name>.

Właściwość Wartość
Grupa parametrów: Resource Id Arguments
--subscription

Nazwa lub identyfikator subskrypcji. Subskrypcję domyślną można skonfigurować przy użyciu az account set -s NAME_OR_ID.

Właściwość Wartość
Grupa parametrów: Resource Id Arguments
--workspace-name

Nazwa obszaru roboczego.

Właściwość Wartość
Grupa parametrów: Resource Id Arguments
--yes -y

Nie monituj o potwierdzenie.

Właściwość Wartość
Domyślna wartość: False
Parametry globalne
--debug

Zwiększ szczegółowość rejestrowania, aby wyświetlić wszystkie dzienniki debugowania.

Właściwość Wartość
Domyślna wartość: False
--help -h

Pokaż ten komunikat pomocy i zakończ pracę.

--only-show-errors

Pokaż tylko błędy, pomijając ostrzeżenia.

Właściwość Wartość
Domyślna wartość: False
--output -o

Format danych wyjściowych.

Właściwość Wartość
Domyślna wartość: json
Dopuszczalne wartości: json, jsonc, none, table, tsv, yaml, yamlc
--query

Ciąg zapytania JMESPath. Zobacz http://jmespath.org/ , aby uzyskać więcej informacji i przykładów.

--verbose

Zwiększ szczegółowość rejestrowania. Użyj --debuguj, aby uzyskać pełne dzienniki debugowania.

Właściwość Wartość
Domyślna wartość: False

az synapse spark pool list

Wyświetl listę wszystkich pul platformy Spark.

az synapse spark pool list --resource-group
                           --workspace-name

Przykłady

Wyświetl listę wszystkich pul platformy Spark.

az synapse spark pool list --workspace-name testsynapseworkspace --resource-group rg

Parametry wymagane

--resource-group -g

Nazwa grupy zasobów. Grupę domyślną można skonfigurować przy użyciu az configure --defaults group=<name>.

--workspace-name

Nazwa obszaru roboczego.

Parametry globalne
--debug

Zwiększ szczegółowość rejestrowania, aby wyświetlić wszystkie dzienniki debugowania.

Właściwość Wartość
Domyślna wartość: False
--help -h

Pokaż ten komunikat pomocy i zakończ pracę.

--only-show-errors

Pokaż tylko błędy, pomijając ostrzeżenia.

Właściwość Wartość
Domyślna wartość: False
--output -o

Format danych wyjściowych.

Właściwość Wartość
Domyślna wartość: json
Dopuszczalne wartości: json, jsonc, none, table, tsv, yaml, yamlc
--query

Ciąg zapytania JMESPath. Zobacz http://jmespath.org/ , aby uzyskać więcej informacji i przykładów.

--subscription

Nazwa lub identyfikator subskrypcji. Subskrypcję domyślną można skonfigurować przy użyciu az account set -s NAME_OR_ID.

--verbose

Zwiększ szczegółowość rejestrowania. Użyj --debuguj, aby uzyskać pełne dzienniki debugowania.

Właściwość Wartość
Domyślna wartość: False

az synapse spark pool show

Pobierz pulę platformy Spark.

az synapse spark pool show [--ids]
                           [--name]
                           [--resource-group]
                           [--subscription]
                           [--workspace-name]

Przykłady

Pobierz pulę platformy Spark.

az synapse spark pool show --name testpool --workspace-name testsynapseworkspace --resource-group rg

Parametry opcjonalne

Poniższe parametry są opcjonalne, ale w zależności od kontekstu co najmniej jeden może być wymagany do pomyślnego wykonania polecenia.

--ids

Co najmniej jeden identyfikator zasobu (rozdzielany spacjami). Powinien to być kompletny identyfikator zasobu, zawierający wszystkie informacje dotyczące argumentów „Identyfikator zasobu”. Należy podać argumenty --ids lub inne argumenty "Identyfikator zasobu".

Właściwość Wartość
Grupa parametrów: Resource Id Arguments
--name -n

Nazwa puli Spark.

Właściwość Wartość
Grupa parametrów: Resource Id Arguments
--resource-group -g

Nazwa grupy zasobów. Grupę domyślną można skonfigurować przy użyciu az configure --defaults group=<name>.

Właściwość Wartość
Grupa parametrów: Resource Id Arguments
--subscription

Nazwa lub identyfikator subskrypcji. Subskrypcję domyślną można skonfigurować przy użyciu az account set -s NAME_OR_ID.

Właściwość Wartość
Grupa parametrów: Resource Id Arguments
--workspace-name

Nazwa obszaru roboczego.

Właściwość Wartość
Grupa parametrów: Resource Id Arguments
Parametry globalne
--debug

Zwiększ szczegółowość rejestrowania, aby wyświetlić wszystkie dzienniki debugowania.

Właściwość Wartość
Domyślna wartość: False
--help -h

Pokaż ten komunikat pomocy i zakończ pracę.

--only-show-errors

Pokaż tylko błędy, pomijając ostrzeżenia.

Właściwość Wartość
Domyślna wartość: False
--output -o

Format danych wyjściowych.

Właściwość Wartość
Domyślna wartość: json
Dopuszczalne wartości: json, jsonc, none, table, tsv, yaml, yamlc
--query

Ciąg zapytania JMESPath. Zobacz http://jmespath.org/ , aby uzyskać więcej informacji i przykładów.

--verbose

Zwiększ szczegółowość rejestrowania. Użyj --debuguj, aby uzyskać pełne dzienniki debugowania.

Właściwość Wartość
Domyślna wartość: False

az synapse spark pool update

Zaktualizuj pulę platformy Spark.

az synapse spark pool update [--delay]
                             [--enable-auto-pause {false, true}]
                             [--enable-auto-scale {false, true}]
                             [--enable-dynamic-exec {false, true}]
                             [--force {false, true}]
                             [--ids]
                             [--library-requirements]
                             [--max-executors]
                             [--max-node-count]
                             [--min-executors]
                             [--min-node-count]
                             [--name]
                             [--no-wait]
                             [--node-count]
                             [--node-size {Large, Medium, None, Small, XLarge, XXLarge, XXXLarge}]
                             [--package]
                             [--package-action {Add, Remove}]
                             [--resource-group]
                             [--spark-config-file-path]
                             [--subscription]
                             [--tags]
                             [--workspace-name]

Przykłady

Zaktualizuj tagi puli Platformy Spark.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--tags key1=value1

Zaktualizuj konfigurację automatycznego skalowania puli Spark.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--enable-auto-scale --min-node-count 3 --max-node-count 100

Zaktualizuj biblioteki niestandardowe puli Platformy Spark.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--package-action Add --package package1.jar package2.jar

Zaktualizuj plik konfiguracji puli Platformy Spark.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--spark-config-file-path 'path/configfile.txt'

Zaktualizuj dynamiczną konfigurację alokacji funkcji wykonawczej puli Spark.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--enable-dynamic-exec --min-executors 3 --max-executors 10

Parametry opcjonalne

Poniższe parametry są opcjonalne, ale w zależności od kontekstu co najmniej jeden może być wymagany do pomyślnego wykonania polecenia.

--delay

Czas opóźnienia, którego jednostka to minuta.

Właściwość Wartość
Grupa parametrów: AutoPause Arguments
--enable-auto-pause

Flaga włączania automatycznego wstrzymywania.

Właściwość Wartość
Grupa parametrów: AutoPause Arguments
Dopuszczalne wartości: false, true
--enable-auto-scale

Flaga włączania automatycznego skalowania.

Właściwość Wartość
Grupa parametrów: AutoScale Arguments
Dopuszczalne wartości: false, true
--enable-dynamic-exec

Wskazuje, czy dynamiczna alokacja funkcji wykonawczej jest włączona, czy nie.

Właściwość Wartość
Grupa parametrów: DynamicExecutor Arguments
Dopuszczalne wartości: false, true
--force

Flaga operacji wymuszania.

Właściwość Wartość
Domyślna wartość: False
Dopuszczalne wartości: false, true
--ids

Co najmniej jeden identyfikator zasobu (rozdzielany spacjami). Powinien to być kompletny identyfikator zasobu, zawierający wszystkie informacje dotyczące argumentów „Identyfikator zasobu”. Należy podać argumenty --ids lub inne argumenty "Identyfikator zasobu".

Właściwość Wartość
Grupa parametrów: Resource Id Arguments
--library-requirements

Plik wymagań biblioteki.

Właściwość Wartość
Grupa parametrów: Environment Configuration Arguments
--max-executors

Maksymalna liczba przyłożonej liczby funkcji wykonawczych.

Właściwość Wartość
Grupa parametrów: DynamicExecutor Arguments
--max-node-count

Maksymalna liczba węzłów.

Właściwość Wartość
Grupa parametrów: AutoScale Arguments
--min-executors

Minimalna liczba alokowanych funkcji wykonawczych.

Właściwość Wartość
Grupa parametrów: DynamicExecutor Arguments
--min-node-count

Minimalna liczba węzłów.

Właściwość Wartość
Grupa parametrów: AutoScale Arguments
--name -n

Nazwa puli Spark.

Właściwość Wartość
Grupa parametrów: Resource Id Arguments
--no-wait

Nie czekaj na zakończenie długotrwałej operacji.

Właściwość Wartość
Domyślna wartość: False
--node-count

Liczba węzłów.

Właściwość Wartość
Grupa parametrów: Node Arguments
--node-size

Poziom mocy obliczeniowej, którą ma każdy węzeł w puli danych big data.

Właściwość Wartość
Grupa parametrów: Node Arguments
Dopuszczalne wartości: Large, Medium, None, Small, XLarge, XXLarge, XXXLarge
--package

Lista nazw pakietów obszarów roboczych.

Właściwość Wartość
Grupa parametrów: Custom Libraries Arguments
--package-action

Akcja pakietu musi być określona podczas dodawania lub usuwania pakietu obszaru roboczego z puli platformy Apache Spark.

Właściwość Wartość
Grupa parametrów: Custom Libraries Arguments
Dopuszczalne wartości: Add, Remove
--resource-group -g

Nazwa grupy zasobów. Grupę domyślną można skonfigurować przy użyciu az configure --defaults group=<name>.

Właściwość Wartość
Grupa parametrów: Resource Id Arguments
--spark-config-file-path

Ścieżka bezwzględna pliku konfiguracji właściwości puli platformy Spark.

Właściwość Wartość
Grupa parametrów: Environment Configuration Arguments
--subscription

Nazwa lub identyfikator subskrypcji. Subskrypcję domyślną można skonfigurować przy użyciu az account set -s NAME_OR_ID.

Właściwość Wartość
Grupa parametrów: Resource Id Arguments
--tags

Tagi rozdzielone spacjami: klucz[=wartość] [key[=value] ...]. Użyj ciągu "", aby wyczyścić istniejące tagi.

--workspace-name

Nazwa obszaru roboczego.

Właściwość Wartość
Grupa parametrów: Resource Id Arguments
Parametry globalne
--debug

Zwiększ szczegółowość rejestrowania, aby wyświetlić wszystkie dzienniki debugowania.

Właściwość Wartość
Domyślna wartość: False
--help -h

Pokaż ten komunikat pomocy i zakończ pracę.

--only-show-errors

Pokaż tylko błędy, pomijając ostrzeżenia.

Właściwość Wartość
Domyślna wartość: False
--output -o

Format danych wyjściowych.

Właściwość Wartość
Domyślna wartość: json
Dopuszczalne wartości: json, jsonc, none, table, tsv, yaml, yamlc
--query

Ciąg zapytania JMESPath. Zobacz http://jmespath.org/ , aby uzyskać więcej informacji i przykładów.

--verbose

Zwiększ szczegółowość rejestrowania. Użyj --debuguj, aby uzyskać pełne dzienniki debugowania.

Właściwość Wartość
Domyślna wartość: False

az synapse spark pool wait

Umieść interfejs wiersza polecenia w stanie oczekiwania do momentu spełnienia warunku puli platformy Spark.

az synapse spark pool wait --big-data-pool-name
                           [--created]
                           [--custom]
                           [--deleted]
                           [--exists]
                           [--ids]
                           [--interval]
                           [--resource-group]
                           [--subscription]
                           [--timeout]
                           [--updated]
                           [--workspace-name]

Parametry wymagane

--big-data-pool-name

Nazwa puli danych big data.

Parametry opcjonalne

Poniższe parametry są opcjonalne, ale w zależności od kontekstu co najmniej jeden może być wymagany do pomyślnego wykonania polecenia.

--created

Zaczekaj na utworzenie polecenia "provisioningState" o godzinie "Succeeded".

Właściwość Wartość
Grupa parametrów: Wait Condition Arguments
Domyślna wartość: False
--custom

Poczekaj, aż warunek spełnia niestandardowe zapytanie JMESPath. Np. provisioningState!='InProgress', instanceView.statuses[?code=='PowerState/running'].

Właściwość Wartość
Grupa parametrów: Wait Condition Arguments
--deleted

Poczekaj na usunięcie.

Właściwość Wartość
Grupa parametrów: Wait Condition Arguments
Domyślna wartość: False
--exists

Zaczekaj, aż zasób istnieje.

Właściwość Wartość
Grupa parametrów: Wait Condition Arguments
Domyślna wartość: False
--ids

Co najmniej jeden identyfikator zasobu (rozdzielany spacjami). Powinien to być kompletny identyfikator zasobu, zawierający wszystkie informacje dotyczące argumentów „Identyfikator zasobu”. Należy podać argumenty --ids lub inne argumenty "Identyfikator zasobu".

Właściwość Wartość
Grupa parametrów: Resource Id Arguments
--interval

Interwał sondowania w sekundach.

Właściwość Wartość
Grupa parametrów: Wait Condition Arguments
Domyślna wartość: 30
--resource-group -g

Nazwa grupy zasobów. Grupę domyślną można skonfigurować przy użyciu az configure --defaults group=<name>.

Właściwość Wartość
Grupa parametrów: Resource Id Arguments
--subscription

Nazwa lub identyfikator subskrypcji. Subskrypcję domyślną można skonfigurować przy użyciu az account set -s NAME_OR_ID.

Właściwość Wartość
Grupa parametrów: Resource Id Arguments
--timeout

Maksymalny czas oczekiwania w sekundach.

Właściwość Wartość
Grupa parametrów: Wait Condition Arguments
Domyślna wartość: 3600
--updated

Zaczekaj na zaktualizowanie stanu provisioningState o 'Powodzenie'.

Właściwość Wartość
Grupa parametrów: Wait Condition Arguments
Domyślna wartość: False
--workspace-name

Nazwa obszaru roboczego.

Właściwość Wartość
Grupa parametrów: Resource Id Arguments
Parametry globalne
--debug

Zwiększ szczegółowość rejestrowania, aby wyświetlić wszystkie dzienniki debugowania.

Właściwość Wartość
Domyślna wartość: False
--help -h

Pokaż ten komunikat pomocy i zakończ pracę.

--only-show-errors

Pokaż tylko błędy, pomijając ostrzeżenia.

Właściwość Wartość
Domyślna wartość: False
--output -o

Format danych wyjściowych.

Właściwość Wartość
Domyślna wartość: json
Dopuszczalne wartości: json, jsonc, none, table, tsv, yaml, yamlc
--query

Ciąg zapytania JMESPath. Zobacz http://jmespath.org/ , aby uzyskać więcej informacji i przykładów.

--verbose

Zwiększ szczegółowość rejestrowania. Użyj --debuguj, aby uzyskać pełne dzienniki debugowania.

Właściwość Wartość
Domyślna wartość: False