Partilhar via

Migrar bibliotecas de espaço de trabalho e propriedades do Spark para um ambiente padrão

Os ambientes Microsoft Fabric fornecem configurações flexíveis para executar seus trabalhos do Spark. Em um ambiente, você pode selecionar diferentes tempos de execução do Spark, configurar seus recursos de computação e instalar bibliotecas de repositórios públicos ou carregar bibliotecas locais personalizadas. Você pode facilmente anexar ambientes aos seus blocos de anotações e definições de trabalho do Spark.

As configurações do espaço de trabalho de Engenharia de Dados e Ciência de Dados são atualizadas para incluir ambientes de malha. Como parte dessa atualização, o Fabric não suporta mais a adição de novas bibliotecas e propriedades do Spark nas configurações do espaço de trabalho. Em vez disso, você pode criar um ambiente de malha, configurar a biblioteca e a propriedade nele e anexá-lo como o ambiente padrão do espaço de trabalho. Depois de criar um ambiente e defini-lo como padrão, você pode migrar as bibliotecas existentes e as propriedades do Spark para esse ambiente padrão.

Neste artigo, você aprenderá a migrar as bibliotecas de espaço de trabalho existentes e as propriedades do Spark para um ambiente.

Importante

  • As configurações do espaço de trabalho são restritas aos administradores.
  • As configurações de espaço de trabalho existentes permanecem efetivas para seus blocos de anotações ou definições de trabalho do Spark se nenhum ambiente estiver conectado a eles. No entanto, não é possível fazer mais alterações nessas configurações. É altamente recomendável migrar as configurações existentes para um ambiente.
  • O processo de migração inclui uma etapa que remove permanentemente todas as configurações existentes. Siga cuidadosamente estas instruções. Não há como recuperar arquivos se eles forem excluídos acidentalmente.

Preparar os arquivos para migração

  1. Em Configurações do espaço de trabalho, revise as configurações existentes.

    Captura de ecrã que mostra onde encontrar as definições de configuração em Definições atuais no separador Ambiente.

  2. Anote a versão atual do Runtime .

  3. Baixe as configurações existentes selecionando Baixar todos os arquivos.

    O conteúdo é baixado como arquivos diferentes. O arquivo Sparkproperties.yml contém todos os pares de valores de chave de propriedades do Spark. O arquivo Publiclibrary.yml contém todas as definições de biblioteca pública. Todos os pacotes personalizados carregados por você ou sua organização são baixados um a um como arquivos. Captura de tela que mostra que as configurações são baixadas para diferentes formatos de arquivo.

Depois que os arquivos forem baixados, você poderá migrar.

Criar e configurar um ambiente

  1. Crie um ambiente na lista de espaços de trabalho/hub de criação. Depois de criar um novo ambiente, a página Ambiente é exibida.

  2. Na guia Página Inicial do ambiente, verifique se a versão do runtime é a mesma que a do runtime do espaço de trabalho existente.

    Captura de tela que mostra onde verificar a versão do Runtime.

  3. Ignore esta etapa se você não tiver bibliotecas públicas nas configurações do espaço de trabalho. Vá para a seção Bibliotecas públicas e selecione Adicionar de .yml. Carregue o arquivo Publiclibrary.yml , que você baixou das configurações de espaço de trabalho existentes.

    Captura de tela que mostra onde selecionar Adicionar de um .yml para instalar uma biblioteca pública.

  4. Ignore esta etapa se você não tiver bibliotecas personalizadas nas configurações do espaço de trabalho. Vá para a seção Bibliotecas personalizadas e selecione Carregar. Carregue os arquivos de biblioteca personalizados, que você baixou das configurações de espaço de trabalho existentes.

    Captura de tela que mostra onde selecionar Carregar para instalar uma biblioteca personalizada.

  5. Ignore esta etapa se você não tiver nenhuma propriedade do Spark nas configurações do espaço de trabalho. Vá para a seção Propriedades do Spark e selecione Carregar. Carregue o arquivo Sparkproperties.yml , que você baixou das configurações de espaço de trabalho existentes.

  6. Selecione Publicar e revise cuidadosamente as alterações novamente. Se tudo estiver correto, publique as alterações. A publicação leva vários minutos para ser concluída.

Após a conclusão da publicação, você configurou com êxito seu ambiente.

Habilitar e selecionar um ambiente padrão nas configurações do espaço de trabalho

Importante

Todas as configurações existentes são descartadas quando você seleciona Ativar ambiente. Certifique-se de que baixou todas as configurações existentes e as instalou com êxito em um ambiente antes de prosseguir.

  1. Vá para Configurações do espaço de trabalho>Ambiente de Engenharia/Ciência>de Dados e selecione Habilitar ambiente. Essa ação remove as configurações existentes e inicia sua experiência de ambiente no nível do espaço de trabalho.

    A tela a seguir aparece depois que você exclui com êxito as configurações existentes.

    Captura de tela que mostra as novas configurações do espaço de trabalho.

  2. Mova o botão Personalizar ambiente para a posição Ativado . Agora você pode anexar um ambiente como um espaço de trabalho padrão.

    Captura de ecrã que mostra onde mover o alternador de personalização do ambiente para a posição Ligado.

  3. Selecione o ambiente que você configurou nas etapas anteriores como o espaço de trabalho padrão e, em seguida, selecione Salvar.

    Captura de tela que mostra onde selecionar um ambiente para anexá-lo como o ambiente padrão.

  4. Confirme se o novo ambiente agora aparece em Ambiente padrão para espaço de trabalho na página Configurações do Spark.

    Captura de tela que mostra que a migração foi bem-sucedida.

Conteúdos relacionados

  • Last updated on