Databricks¶

Databricksコネクターを使用することで、AzureまたはAWS上のDatabricksのデータにアクセスできます。 Databricksコネクターを使用すると、Databricksテーブルへのアクセスに加え、Delta LakeおよびIceberg形式で保存されたデータへのアクセスが可能です。ただし、それらのデータがDatabricks Unity Catalogにテーブルとして登録されている場合に限ります。 The native Databricks connector also supports ingesting unstructured data from the Databricks Unity Catalog volumes, allowing you to browse and ingest files stored in volumes when creating vector databases.

サポートされている認証¶

• パーソナルアクセストークン
• サービスプリンシパル

前提条件¶

DataRobotでDatabricksに接続する前に、認証用の パーソナルアクセストークンまたは サービスプリンシパルに加えて、以下が必要となります。

To ingest unstructured data, you must also set up a volume in the Databricks Unity Catalog.

パーソナルアクセストークンの生成¶

サービスプリンシパルの作成¶

DataRobotでの接続の設定¶

The example below shows how to connect to Databricks using Azure and an access token to ingest structured data.

DataRobotで Databricksに接続するには：

1. ワークベンチを開き、ユースケースを選択します。
2. データソースに接続する手順に従ってください。

3. 前のセクションで取得した情報を使用して、 必要な設定パラメーターを入力します。

4. 認証で、新しい資格情報をクリックします。 次に、アクセストークンと一意の表示名を入力します。 このデータソースへの資格情報をすでに追加している場合は、保存済みの資格情報から資格情報を選択できます。

   認証方法としてサービスプリンシパルを選択した場合、クライアントID、クライアントシークレット、一意の表示名を入力します。

5. 保存をクリックします。

必須パラメーター¶

以下の表は、Databricksとの接続を確立するために最低限必要なフィールドの一覧です。

SQLウェアハウスはSQLの実行専用であるため、その結果としてクラスターよりもオーバーヘッドが少なく、多くの場合はパフォーマンスが向上します。 可能な場合は、SQLウェアハウスを使用することをお勧めします。

トラブルシューティング¶

機能に関する注意事項¶

Review the feature considerations below before connecting to Databricks: