次の方法で共有


Scala 用 Databricks Connect の制限事項

この記事では、Databricks Runtime 13.3 LTS 以降用の Databricks Connect について説明します。

この記事では、Databricks Connect for Scala の制限事項を示します。 Databricks Connect を使用すると、一般的な IDE、ノートブック サーバー、カスタム アプリケーションを Azure Databricks コンピューティング リソースに接続できます。 「Databricks Connect とは」を参照してください。 この記事の Python バージョンについては、 Databricks Connect for Python の制限事項に関する記事を参照してください。

Important

使用している Scala、Java、Databricks Runtime、Databricks Connect のバージョンによっては、一部の機能のバージョン要件が存在する場合があります。 要件を参照してください。

使用可能な機能

Databricks Runtime 13.3 LTS 以前用の Databricks Connect では使用できません。

  • foreachBatch のストリーミング
  • 128 MB を超えるデータフレームの作成
  • 3,600 秒を超える長いクエリ
  • 専用アクセス モード (以前のシングル ユーザー) を使用するコンピューティング リソース上のスカラー UDF

使用できません。

  • Databricks ユーティリティ: credentialslibrarynotebook workflowwidgets
  • Sparkコンテキスト
  • RDD群
  • CREATE TABLE <table-name> AS SELECT (代わりに spark.sql("SELECT ...").write.saveAsTable("table") を使用してください)
  • SparkContext を使用した Log4j ログ レベルの変更
  • 分散機械学習トレーニング
  • ローカル開発環境とリモート コンピューティング リソースの同期