Ambiente sem servidor versão 3

Este artigo descreve as informações de ambiente do sistema para o ambiente sem servidor versão 3.

Para garantir a compatibilidade com o aplicativo, as cargas de trabalho sem servidor usam uma API com versão, conhecida como a versão do ambiente, que permanece compatível com versões de servidor mais recentes.

Você pode selecionar a versão do ambiente usando o painel lateral do Environment em seus notebooks sem servidor. Confira Selecionar uma versão do ambiente.

Novos recursos e melhorias

Os novos recursos e melhorias a seguir estão disponíveis no ambiente sem servidor 3.

Atualizações de API

18 de agosto de 2025

As UDFs escalares do Python agora dão suporte a credenciais de serviço

UDFs escalares do Python podem usar credenciais de serviço do Catálogo do Unity para acessar com segurança serviços de nuvem externos. Para obter mais informações, consulte as credenciais de serviço em UDFs escalares do Python.

13 de junho de 2025

O ambiente sem servidor 3 inclui as seguintes atualizações de API:

• Suporte à API de pushdown de filtro adicionado a fontes de dados do Python. Consulte Adicionar suporte à API de pushdown de filtro a fontes de dados do Python.
• O rastreamento de UDF do Python agora inclui quadros do driver e do executor, juntamente com os quadros do cliente. Consulte a melhoria de rastreamento de UDF do Python.
• Novos listagg e string_agg funções agregam STRING e BINARY valores em um grupo. Consulte Novas listagg e string_agg funções.
• variant_get e get_json_object agora consideram espaços iniciais em caminhos no Apache Spark. Consulte variant_get e get_json_object agora consideram os espaços iniciais em caminhos no Apache Spark.
• SPARK-51079 Suporte a tipos de variáveis grandes no Pandas UDF, createDataFrame e toPandas com Arrow.
• SPARK-51186 Adicione StreamingPythonRunnerInitializationException à exceção base do PySpark.
• SPARK-51112 Evite usar pyarrow's to_pandas em uma tabela vazia.
• SPARK-51506 [PYTHON][ss] Não imponha que os usuários implementem close() em TransformWithStateInPandas
• SPARK-51425 [Conectar] Adicionar API do cliente para definir personalizado operation_id
• SPARK-51206 [PYTHON][Connect] Mover auxiliares de conversão Arrow para fora do Spark Connect

Databricks Connect atualizado para 16.3

13 de junho de 2025

Use os recursos e as melhorias que estão disponíveis no Databricks Connect para Databricks Runtime 16.3. Consulte Databricks Connect para Databricks Runtime 16.3.

Aprimoramento no destaque de erros de sintaxe em Python

13 de junho de 2025

As melhorias no destacamento de erros de sintaxe do Python serão as seguintes:

• Latência de tratamento de erros mais rápida.
• Suporte para realce de erros de tipo Python.
• Configurabilidade do Linter por meio de arquivos pyproject.toml.

Consulte Destaque de erro do Python.

Suporte à CLI do Git no terminal da Web e no notebook

13 de junho de 2025

Agora você pode usar a CLI do Git em um notebook sem servidor e no terminal Web do notebook sem servidor.

Alteração comportamental em relação a versões de ambiente conflitantes

13 de junho de 2025

Nos casos em que uma versão de ambiente sem servidor é declarada no painel ambiente do notebook e em um arquivo de ambiente base personalizado, a versão do ambiente base tem precedência, a menos que ambas as versões declaradas estejam na versão 3, nesse caso, a versão do notebook é usada.

Por exemplo:

• Se o notebook usar v1 e o ambiente base usar v3, a carga de trabalho usará v3.
• Se o notebook usar v1 e o ambiente base usar v2, a carga de trabalho usará v1.
• Se o notebook usar v3 e o ambiente base usar v1, a carga de trabalho usará v1.
• Se o notebook usar v2 e o ambiente base usar v1, a carga de trabalho usará v2.

Ambiente do sistema

• Sistema operacional: Ubuntu 24.04.2 LTS
• Python: 3.12.3
• Databricks Connect: 16.4.2

Bibliotecas do Python instaladas

Para reproduzir o ambiente sem servidor 3 em seu ambiente virtual python local, baixe o arquivo requirements-env-3.txt e execute pip install -r requirements-env-3.txt. Esse comando instala todas as bibliotecas de software livre do ambiente sem servidor 3.