az synapse spark pool
Spark-pools beheren.
Opdracht
| Name | Description | Type | Status |
|---|---|---|---|
| az synapse spark pool create |
Maak een Spark-pool. |
Core | GA |
| az synapse spark pool delete |
Een Spark-pool verwijderen. |
Core | GA |
| az synapse spark pool list |
Alle Spark-pools weergeven. |
Core | GA |
| az synapse spark pool show |
Haal een Spark-pool op. |
Core | GA |
| az synapse spark pool update |
Werk de Spark-pool bij. |
Core | GA |
| az synapse spark pool wait |
Plaats de CLI in een wachtstatus totdat aan een voorwaarde van een Spark-pool wordt voldaan. |
Core | GA |
az synapse spark pool create
Maak een Spark-pool.
az synapse spark pool create --name
--node-count
--node-size {Large, Medium, None, Small, XLarge, XXLarge, XXXLarge}
--resource-group
--spark-version
--workspace-name
[--delay]
[--enable-auto-pause {false, true}]
[--enable-auto-scale {false, true}]
[--enable-dynamic-exec {false, true}]
[--max-executors]
[--max-node-count]
[--min-executors]
[--min-node-count]
[--no-wait]
[--node-size-family {HardwareAcceleratedFPGA, HardwareAcceleratedGPU, MemoryOptimized, None}]
[--spark-config-file-path]
[--spark-events-folder]
[--spark-log-folder]
[--tags]
Voorbeelden
Maak een Spark-pool.
az synapse spark pool create --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--spark-version 2.4 --node-count 3 --node-size Medium --spark-config-file-path 'path/configfile.txt'
Vereiste parameters
De naam van de Spark-pool.
Het aantal knooppunten.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Node Arguments |
Het rekenvermogen dat elk knooppunt in de big data-pool heeft.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Node Arguments |
| Geaccepteerde waarden: | Large, Medium, None, Small, XLarge, XXLarge, XXXLarge |
Naam van resourcegroep. U kunt de standaardgroep configureren met behulp van az configure --defaults group=<name>.
De ondersteunde Spark-versie is nu 2.4.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Component Version Arguments |
De naam van de werkruimte.
Optionele parameters
De volgende parameters zijn optioneel, maar afhankelijk van de context kunnen een of meer parameters vereist zijn om de opdracht uit te voeren.
De vertragingstijd waarvan de eenheid minuut is.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | AutoPause Arguments |
De vlag voor het inschakelen van automatisch onderbreken.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | AutoPause Arguments |
| Geaccepteerde waarden: | false, true |
De vlag voor het inschakelen van automatische schaalaanpassing.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | AutoScale Arguments |
| Geaccepteerde waarden: | false, true |
Geeft aan of dynamische uitvoerdertoewijzing is ingeschakeld of niet.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | DynamicExecutor Arguments |
| Geaccepteerde waarden: | false, true |
Het maximum aantal uitvoerders dat is toegewezen.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | DynamicExecutor Arguments |
Het maximumaantal knooppunten.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | AutoScale Arguments |
Het minimale aantal uitvoerders dat is toegewezen.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | DynamicExecutor Arguments |
Het minimumaantal knooppunten.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | AutoScale Arguments |
Wacht niet totdat de langdurige bewerking is voltooid.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
Het soort knooppunten dat de big data-pool biedt.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Node Arguments |
| Default value: | MemoryOptimized |
| Geaccepteerde waarden: | HardwareAcceleratedFPGA, HardwareAcceleratedGPU, MemoryOptimized, None |
Absoluut pad van het configuratiebestand met eigenschappen van Spark-pool.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Environment Configuration Arguments |
De map Met Spark-gebeurtenissen.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Default Folder Arguments |
| Default value: | /events |
De standaardmap van het Spark-logboek.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Default Folder Arguments |
| Default value: | /logs |
Door spaties gescheiden tags: key[=value] [key[=value] ...]. Gebruik '' om bestaande tags te wissen.
Globale parameters
Vergroot de uitgebreidheid van logboekregistratie om alle logboeken voor foutopsporing weer te geven.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
Dit Help-bericht weergeven en afsluiten.
Alleen fouten weergeven, waarschuwingen onderdrukken.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
Uitvoerindeling.
| Eigenschap | Waarde |
|---|---|
| Default value: | json |
| Geaccepteerde waarden: | json, jsonc, none, table, tsv, yaml, yamlc |
JMESPath-queryreeks. Zie http://jmespath.org/ voor meer informatie en voorbeelden.
Naam of id van abonnement. U kunt het standaardabonnement configureren met behulp van az account set -s NAME_OR_ID.
Vergroot de uitgebreidheid van logboekregistratie. Gebruik --debug voor volledige foutopsporingslogboeken.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
az synapse spark pool delete
Een Spark-pool verwijderen.
az synapse spark pool delete [--ids]
[--name]
[--no-wait]
[--resource-group]
[--subscription]
[--workspace-name]
[--yes]
Voorbeelden
Een Spark-pool verwijderen.
az synapse spark pool delete --name testpool --workspace-name testsynapseworkspace --resource-group rg
Optionele parameters
De volgende parameters zijn optioneel, maar afhankelijk van de context kunnen een of meer parameters vereist zijn om de opdracht uit te voeren.
Een of meer resource-id's (met spatie gescheiden). Dit moet een volledige resource-id zijn die alle informatie over de argumenten Resource-id bevat. U moet ofwel --id's of andere 'Resource Id'-argumenten opgeven.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Resource Id Arguments |
De naam van de Spark-pool.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Resource Id Arguments |
Wacht niet totdat de langdurige bewerking is voltooid.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
Naam van resourcegroep. U kunt de standaardgroep configureren met behulp van az configure --defaults group=<name>.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Resource Id Arguments |
Naam of id van abonnement. U kunt het standaardabonnement configureren met behulp van az account set -s NAME_OR_ID.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Resource Id Arguments |
De naam van de werkruimte.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Resource Id Arguments |
Niet vragen om bevestiging.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
Globale parameters
Vergroot de uitgebreidheid van logboekregistratie om alle logboeken voor foutopsporing weer te geven.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
Dit Help-bericht weergeven en afsluiten.
Alleen fouten weergeven, waarschuwingen onderdrukken.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
Uitvoerindeling.
| Eigenschap | Waarde |
|---|---|
| Default value: | json |
| Geaccepteerde waarden: | json, jsonc, none, table, tsv, yaml, yamlc |
JMESPath-queryreeks. Zie http://jmespath.org/ voor meer informatie en voorbeelden.
Vergroot de uitgebreidheid van logboekregistratie. Gebruik --debug voor volledige foutopsporingslogboeken.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
az synapse spark pool list
Alle Spark-pools weergeven.
az synapse spark pool list --resource-group
--workspace-name
Voorbeelden
Alle Spark-pools weergeven.
az synapse spark pool list --workspace-name testsynapseworkspace --resource-group rg
Vereiste parameters
Naam van resourcegroep. U kunt de standaardgroep configureren met behulp van az configure --defaults group=<name>.
De naam van de werkruimte.
Globale parameters
Vergroot de uitgebreidheid van logboekregistratie om alle logboeken voor foutopsporing weer te geven.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
Dit Help-bericht weergeven en afsluiten.
Alleen fouten weergeven, waarschuwingen onderdrukken.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
Uitvoerindeling.
| Eigenschap | Waarde |
|---|---|
| Default value: | json |
| Geaccepteerde waarden: | json, jsonc, none, table, tsv, yaml, yamlc |
JMESPath-queryreeks. Zie http://jmespath.org/ voor meer informatie en voorbeelden.
Naam of id van abonnement. U kunt het standaardabonnement configureren met behulp van az account set -s NAME_OR_ID.
Vergroot de uitgebreidheid van logboekregistratie. Gebruik --debug voor volledige foutopsporingslogboeken.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
az synapse spark pool show
Haal een Spark-pool op.
az synapse spark pool show [--ids]
[--name]
[--resource-group]
[--subscription]
[--workspace-name]
Voorbeelden
Haal een Spark-pool op.
az synapse spark pool show --name testpool --workspace-name testsynapseworkspace --resource-group rg
Optionele parameters
De volgende parameters zijn optioneel, maar afhankelijk van de context kunnen een of meer parameters vereist zijn om de opdracht uit te voeren.
Een of meer resource-id's (met spatie gescheiden). Dit moet een volledige resource-id zijn die alle informatie over de argumenten Resource-id bevat. U moet ofwel --id's of andere 'Resource Id'-argumenten opgeven.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Resource Id Arguments |
De naam van de Spark-pool.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Resource Id Arguments |
Naam van resourcegroep. U kunt de standaardgroep configureren met behulp van az configure --defaults group=<name>.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Resource Id Arguments |
Naam of id van abonnement. U kunt het standaardabonnement configureren met behulp van az account set -s NAME_OR_ID.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Resource Id Arguments |
De naam van de werkruimte.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Resource Id Arguments |
Globale parameters
Vergroot de uitgebreidheid van logboekregistratie om alle logboeken voor foutopsporing weer te geven.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
Dit Help-bericht weergeven en afsluiten.
Alleen fouten weergeven, waarschuwingen onderdrukken.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
Uitvoerindeling.
| Eigenschap | Waarde |
|---|---|
| Default value: | json |
| Geaccepteerde waarden: | json, jsonc, none, table, tsv, yaml, yamlc |
JMESPath-queryreeks. Zie http://jmespath.org/ voor meer informatie en voorbeelden.
Vergroot de uitgebreidheid van logboekregistratie. Gebruik --debug voor volledige foutopsporingslogboeken.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
az synapse spark pool update
Werk de Spark-pool bij.
az synapse spark pool update [--delay]
[--enable-auto-pause {false, true}]
[--enable-auto-scale {false, true}]
[--enable-dynamic-exec {false, true}]
[--force {false, true}]
[--ids]
[--library-requirements]
[--max-executors]
[--max-node-count]
[--min-executors]
[--min-node-count]
[--name]
[--no-wait]
[--node-count]
[--node-size {Large, Medium, None, Small, XLarge, XXLarge, XXXLarge}]
[--package]
[--package-action {Add, Remove}]
[--resource-group]
[--spark-config-file-path]
[--subscription]
[--tags]
[--workspace-name]
Voorbeelden
Werk de tags van de Spark-pool bij.
az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--tags key1=value1
Werk de configuratie van de automatische schaal van de Spark-pool bij.
az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--enable-auto-scale --min-node-count 3 --max-node-count 100
Werk de aangepaste bibliotheken van de Spark-pool bij.
az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--package-action Add --package package1.jar package2.jar
Werk het configuratiebestand van de Spark-pool bij.
az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--spark-config-file-path 'path/configfile.txt'
Werk de dynamische toewijzingsconfiguratie van de Spark-pool bij.
az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--enable-dynamic-exec --min-executors 3 --max-executors 10
Optionele parameters
De volgende parameters zijn optioneel, maar afhankelijk van de context kunnen een of meer parameters vereist zijn om de opdracht uit te voeren.
De vertragingstijd waarvan de eenheid minuut is.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | AutoPause Arguments |
De vlag voor het inschakelen van automatisch onderbreken.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | AutoPause Arguments |
| Geaccepteerde waarden: | false, true |
De vlag voor het inschakelen van automatische schaalaanpassing.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | AutoScale Arguments |
| Geaccepteerde waarden: | false, true |
Geeft aan of dynamische uitvoerdertoewijzing is ingeschakeld of niet.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | DynamicExecutor Arguments |
| Geaccepteerde waarden: | false, true |
De vlag van de geforceerde operatie.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
| Geaccepteerde waarden: | false, true |
Een of meer resource-id's (met spatie gescheiden). Dit moet een volledige resource-id zijn die alle informatie over de argumenten Resource-id bevat. U moet ofwel --id's of andere 'Resource Id'-argumenten opgeven.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Resource Id Arguments |
Het bestand met bibliotheekvereisten.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Environment Configuration Arguments |
Het maximum aantal uitvoerders dat is toegewezen.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | DynamicExecutor Arguments |
Het maximumaantal knooppunten.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | AutoScale Arguments |
Het minimale aantal uitvoerders dat is toegewezen.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | DynamicExecutor Arguments |
Het minimumaantal knooppunten.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | AutoScale Arguments |
De naam van de Spark-pool.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Resource Id Arguments |
Wacht niet totdat de langdurige bewerking is voltooid.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
Het aantal knooppunten.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Node Arguments |
Het rekenvermogen dat elk knooppunt in de big data-pool heeft.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Node Arguments |
| Geaccepteerde waarden: | Large, Medium, None, Small, XLarge, XXLarge, XXXLarge |
Lijst met naam van werkruimtepakketten.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Custom Libraries Arguments |
Pakketactie moet worden opgegeven wanneer u een werkruimtepakket toevoegt aan of verwijdert uit een Apache Spark-pool.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Custom Libraries Arguments |
| Geaccepteerde waarden: | Add, Remove |
Naam van resourcegroep. U kunt de standaardgroep configureren met behulp van az configure --defaults group=<name>.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Resource Id Arguments |
Absoluut pad van het configuratiebestand met eigenschappen van Spark-pool.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Environment Configuration Arguments |
Naam of id van abonnement. U kunt het standaardabonnement configureren met behulp van az account set -s NAME_OR_ID.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Resource Id Arguments |
Door spaties gescheiden tags: key[=value] [key[=value] ...]. Gebruik '' om bestaande tags te wissen.
De naam van de werkruimte.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Resource Id Arguments |
Globale parameters
Vergroot de uitgebreidheid van logboekregistratie om alle logboeken voor foutopsporing weer te geven.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
Dit Help-bericht weergeven en afsluiten.
Alleen fouten weergeven, waarschuwingen onderdrukken.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
Uitvoerindeling.
| Eigenschap | Waarde |
|---|---|
| Default value: | json |
| Geaccepteerde waarden: | json, jsonc, none, table, tsv, yaml, yamlc |
JMESPath-queryreeks. Zie http://jmespath.org/ voor meer informatie en voorbeelden.
Vergroot de uitgebreidheid van logboekregistratie. Gebruik --debug voor volledige foutopsporingslogboeken.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
az synapse spark pool wait
Plaats de CLI in een wachtstatus totdat aan een voorwaarde van een Spark-pool wordt voldaan.
az synapse spark pool wait --big-data-pool-name
[--created]
[--custom]
[--deleted]
[--exists]
[--ids]
[--interval]
[--resource-group]
[--subscription]
[--timeout]
[--updated]
[--workspace-name]
Vereiste parameters
Naam van big data-pool.
Optionele parameters
De volgende parameters zijn optioneel, maar afhankelijk van de context kunnen een of meer parameters vereist zijn om de opdracht uit te voeren.
Wacht totdat u 'provisioningState' hebt gemaakt bij 'Succeeded'.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Wait Condition Arguments |
| Default value: | False |
Wacht tot de voorwaarde voldoet aan een aangepaste JMESPath-query. Bijvoorbeeld provisioningState!='InProgress', instanceView.statuses[?code=='PowerState/running'].
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Wait Condition Arguments |
Wacht totdat deze is verwijderd.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Wait Condition Arguments |
| Default value: | False |
Wacht tot de resource bestaat.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Wait Condition Arguments |
| Default value: | False |
Een of meer resource-id's (met spatie gescheiden). Dit moet een volledige resource-id zijn die alle informatie over de argumenten Resource-id bevat. U moet ofwel --id's of andere 'Resource Id'-argumenten opgeven.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Resource Id Arguments |
Polling-interval in seconden.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Wait Condition Arguments |
| Default value: | 30 |
Naam van resourcegroep. U kunt de standaardgroep configureren met behulp van az configure --defaults group=<name>.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Resource Id Arguments |
Naam of id van abonnement. U kunt het standaardabonnement configureren met behulp van az account set -s NAME_OR_ID.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Resource Id Arguments |
Maximale wachttijd in seconden.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Wait Condition Arguments |
| Default value: | 3600 |
Wacht totdat deze is bijgewerkt met provisioningState op 'Succeeded'.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Wait Condition Arguments |
| Default value: | False |
De naam van de werkruimte.
| Eigenschap | Waarde |
|---|---|
| Parametergroep: | Resource Id Arguments |
Globale parameters
Vergroot de uitgebreidheid van logboekregistratie om alle logboeken voor foutopsporing weer te geven.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
Dit Help-bericht weergeven en afsluiten.
Alleen fouten weergeven, waarschuwingen onderdrukken.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |
Uitvoerindeling.
| Eigenschap | Waarde |
|---|---|
| Default value: | json |
| Geaccepteerde waarden: | json, jsonc, none, table, tsv, yaml, yamlc |
JMESPath-queryreeks. Zie http://jmespath.org/ voor meer informatie en voorbeelden.
Vergroot de uitgebreidheid van logboekregistratie. Gebruik --debug voor volledige foutopsporingslogboeken.
| Eigenschap | Waarde |
|---|---|
| Default value: | False |