无服务器计算限制

本文介绍了笔记本和作业的无服务器计算的当前限制。它首先概述了最重要的注意事项，然后提供一个全面的限制参考列表。

一般限制

在新建工作负荷或将工作负荷迁移到无服务器计算之前，请先考虑以下限制：

不支持 R。
仅支持 Spark Connect API。不支持 Spark RDD API。
Spark Connect（由无服务器计算使用）将分析和名称解析推迟到执行时间，这可能会更改代码的行为。请参阅 “将 Spark 连接与 Spark 经典版进行比较”。
无服务器计算适用于所有工作区用户。
不支持笔记本标记。使用无服务器预算策略标记无服务器使用情况。
编写 SQL 时，ANSI SQL 是默认值。将spark.sql.ansi.enabled设置为false以选择退出 ANSI 模式。

不支持 Databricks 容器服务。
必须使用 Unity Catalog 连接到外部数据源。使用外部位置访问云存储。
用户定义的函数 (UDF) 无法访问 Internet。因此，不支持 CREATE FUNCTION（外部）命令。 Databricks 建议使用 CREATE FUNCTION（SQL 和 Python）来创建 UDF。
用户定义的自定义代码（例如 UDF）， map并且 mapPartitions内存使用量不能超过 1 GB。
使用 spark.createDataFrame本地数据创建数据帧时，行大小不能超过 128MB。
Spark UI 不可用。请改用查询配置文件来查看有关 Spark 查询的信息。请参阅查询配置文件。
使用无服务器笔记本和作业时，Spark 日志不可用。用户只能访问客户端应用程序日志。
仅当工作区位于同一区域且目标工作区未配置 IP ACL 或前端 PrivateLink 时，才允许跨工作区访问。
不支持全局临时视图。 Databricks 建议使用会话临时视图或创建需要跨会话数据传递的表。
不支持 Maven 坐标。

不会为每个任务运行隔离任务日志。日志将包含多个任务的输出。
笔记本任务不支持任务库。请改用笔记本范围的库。请参阅作用域为笔记本的 Python 库。
默认情况下，无服务器任务没有查询执行超时。可以使用该 spark.databricks.execution.timeout 属性为作业查询设置执行超时。有关详细信息，请参阅为无服务器笔记本和作业配置 Spark 属性。

不支持以下特定于计算的功能：

不支持 Hive SerDe 表。此外，不支持用于将数据加载到 Hive SerDe 表中的相应 LOAD DATA 命令。使用该命令会导致异常。

对数据源的支持仅限于 AVRO、BINARYFILE、CSV、DELTA、JSON、KAFKA、ORC、PARQUET、ORC、TEXT 和 XML。
不支持使用语法的 ${env:var}（例如 ${configName}、${system:var}、spark.sql.variable 和 ${var}）或配置变量引用。使用 Hive 变量会导致异常。

请改用 DECLARE VARIABLE、SET VARIABLE 和 SQL 会话变量引用以及参数标记（“？”或“：var”）来声明、修改和引用会话状态。在许多情况下，可以使用 IDENTIFIER 子句来参数化对象名称。

无服务器计算支持 DML作的以下数据源（写入、更新、删除）：

无服务器计算支持以下数据源进行读取作：

此页面是否有帮助？