Partilhar via

DatabricksCompute Classe

Gerencia um destino de computação Databricks no Azure Machine Learning.

O Azure Databricks é um ambiente baseado no Apache Spark na nuvem do Azure. Pode ser utilizado como destino de computação com um pipeline do Azure Machine Learning. Para obter mais informações, consulte O que são destinos de computação no Azure Machine Learning?

Classe ComputeTarget construtor.

Recupere uma representação na nuvem de um objeto Compute associado ao espaço de trabalho fornecido. Retorna uma instância de uma classe filho correspondente ao tipo específico do objeto Compute recuperado.

Construtor

DatabricksCompute(workspace, name)

Parâmetros

Name Description
workspace
Necessário
Workspace

O objeto de espaço de trabalho que contém o objeto DatabricksCompute a ser recuperado.
name
Necessário
str

O nome do objeto DatabricksCompute a ser recuperado.
workspace
Necessário
Workspace

O objeto de espaço de trabalho que contém o objeto Compute a ser recuperado.
name
Necessário
str

O nome do objeto Compute a ser recuperado.

Observações

O exemplo a seguir mostra como anexar o Azure Databricks como um destino de computação.


   # Replace with your account info before running.

   db_compute_name=os.getenv("DATABRICKS_COMPUTE_NAME", "<my-databricks-compute-name>") # Databricks compute name
   db_resource_group=os.getenv("DATABRICKS_RESOURCE_GROUP", "<my-db-resource-group>") # Databricks resource group
   db_workspace_name=os.getenv("DATABRICKS_WORKSPACE_NAME", "<my-db-workspace-name>") # Databricks workspace name
   db_access_token=os.getenv("DATABRICKS_ACCESS_TOKEN", "<my-access-token>") # Databricks access token

   try:
       databricks_compute = DatabricksCompute(workspace=ws, name=db_compute_name)
       print('Compute target {} already exists'.format(db_compute_name))
   except ComputeTargetException:
       print('Compute not found, will use below parameters to attach new one')
       print('db_compute_name {}'.format(db_compute_name))
       print('db_resource_group {}'.format(db_resource_group))
       print('db_workspace_name {}'.format(db_workspace_name))
       print('db_access_token {}'.format(db_access_token))

       config = DatabricksCompute.attach_configuration(
           resource_group = db_resource_group,
           workspace_name = db_workspace_name,
           access_token= db_access_token)
       databricks_compute=ComputeTarget.attach(ws, db_compute_name, config)
       databricks_compute.wait_for_completion(True)

A amostra completa está disponível em https://github.com/Azure/MachineLearningNotebooks/blob/master/how-to-use-azureml/machine-learning-pipelines/intro-to-pipelines/aml-pipelines-use-databricks-as-compute-target.ipynb

Métodos

attach

PRETERIDO. Use o attach_configuration método em vez disso.

Associe um recurso de computação Databricks existente ao espaço de trabalho fornecido.
attach_configuration

Crie um objeto de configuração para anexar um destino de computação Databricks.
delete

Não há suporte para Delete para um objeto DatabricksCompute. Utilize detach em substituição.
deserialize

Converter um objeto JSON em um objeto DatabricksCompute.
detach

Desanexa o objeto Databricks de seu espaço de trabalho associado.

Os objetos de nuvem subjacentes não são excluídos, apenas a associação é removida.
get_credentials

Recupere as credenciais para o destino Databricks.
refresh_state

Execute uma atualização in-loco das propriedades do objeto.

Este método atualiza as propriedades com base no estado atual do objeto de nuvem correspondente. Isso é usado principalmente para sondagem manual do estado de computação.
serialize

Converta este objeto DatabricksCompute em um dicionário serializado JSON.

attach

PRETERIDO. Use o attach_configuration método em vez disso.

Associe um recurso de computação Databricks existente ao espaço de trabalho fornecido.

static attach(workspace, name, resource_id, access_token)

Parâmetros

Name Description
workspace
Necessário
Workspace

O objeto de espaço de trabalho ao qual associar o recurso de computação.
name
Necessário
str

O nome a ser associado ao recurso de computação dentro do espaço de trabalho fornecido. Não precisa corresponder ao nome do recurso de computação a ser anexado.
resource_id
Necessário
str

A ID do recurso do Azure para o recurso de computação que está sendo anexado.
access_token
Necessário
str

O token de acesso para o recurso que está sendo anexado.

Devoluções

Tipo Description
DatabricksCompute

Uma representação do objeto DatabricksCompute do objeto de computação.

Exceções

Tipo Description
ComputeTargetException

attach_configuration

Crie um objeto de configuração para anexar um destino de computação Databricks.

static attach_configuration(resource_group=None, workspace_name=None, resource_id=None, access_token='')

Parâmetros

Name Description
resource_group
str

O nome do grupo de recursos no qual o Databricks está localizado.

Default value: None
workspace_name
str

O nome do espaço de trabalho Databricks.

Default value: None
resource_id
str

A ID do recurso do Azure para o recurso de computação que está sendo anexado.

Default value: None
access_token
Necessário
str

O token de acesso para o recurso de computação que está sendo anexado.

Devoluções

Tipo Description
DatabricksAttachConfiguration

Um objeto de configuração a ser usado ao anexar um objeto Compute.

delete

Não há suporte para Delete para um objeto DatabricksCompute. Utilize detach em substituição.

delete()

Exceções

Tipo Description
ComputeTargetException

deserialize

Converter um objeto JSON em um objeto DatabricksCompute.

static deserialize(workspace, object_dict)

Parâmetros

Name Description
workspace
Necessário
Workspace

O objeto de espaço de trabalho ao qual o objeto DatabricksCompute está associado.
object_dict
Necessário
dict

Um objeto JSON para converter em um objeto DatabricksCompute.

Devoluções

Tipo Description
DatabricksCompute

A representação DatabricksCompute do objeto JSON fornecido.

Exceções

Tipo Description
ComputeTargetException

Observações

Gera um ComputeTargetException se o espaço de trabalho fornecido não for o espaço de trabalho ao qual a computação está associada.

detach

Desanexa o objeto Databricks de seu espaço de trabalho associado.

Os objetos de nuvem subjacentes não são excluídos, apenas a associação é removida.

detach()

Exceções

Tipo Description
ComputeTargetException

get_credentials

Recupere as credenciais para o destino Databricks.

get_credentials()

Devoluções

Tipo Description
dict

As credenciais para o destino Databricks.

Exceções

Tipo Description
ComputeTargetException

refresh_state

Execute uma atualização in-loco das propriedades do objeto.

Este método atualiza as propriedades com base no estado atual do objeto de nuvem correspondente. Isso é usado principalmente para sondagem manual do estado de computação.

refresh_state()

serialize

Converta este objeto DatabricksCompute em um dicionário serializado JSON.

serialize()

Devoluções

Tipo Description
dict

A representação JSON deste objeto DatabricksCompute.