Databricks

Azure

Azure DatabricksからアプリログをLog Analytics ワークスペースに送信する

Azure DatabricksからLog Analyticsワークスペースにログを送信するために、ログ出力モジュールを作成していきます。また、複数のAzureリソースも必要になるので合わせて作成します。今回紹介する方法はDatabricksに限らず活用できます。
Azure

Azure DatabricksからStorage Accountにprivate接続する

Azure DatabricksからStorageなど他のAzureサービスにアクセスするときに、privateに閉じた形で通信させる必要がある場合が多々あります。今回はその設定方法についてまとめていきます。
Azure

Databricks Reposを自動的に更新する

GitHub Actionsを利用して、GitHubにpushした内容を自動的にDatabricks Reposへ反映させる際の設定作業についてまとめました。
Azure

Databricks ReposとGitHubを連携する

Azure DatabricksにはGitリポジトリの機能があります(Repos)。Reposを活用することで効率的に開発することができます。今回はReposの作成について順を追ってまとめています。
Azure

VSCodeからAzure Databricksクラスターに接続する(Databricks Connect)

VSCodeのDatabricks拡張機能にはDatabricks Connect統合という機能があります。この機能を使用してローカルで開発しながらAzure Databricksクラスターに接続してデバッグ実行することができます。本記事ではその設定方法について記載します。
Azure

ローカルからAzure Databricksクラスターにアタッチする(Databricks Power Tool)

Databricksで使用するノートブックの開発をローカル環境で行う際に、Azure上のDatabricksクラスターにアタッチする方法を記載します。今回はVSCodeの拡張機能であるDatabricks Power Toolを利用してアタッチします。