HOME
Lv014

「Lv014」の記事一覧

Databricks CLIを使用して、ローカルのファイル変更をリアルタイムでワークスペースに同期するコマンドはどれか。

`databricks sync` コマンド（またはDABsのsync機能）を使用すると、ローカル開発環境のコード変更を即座…

2026年3月8日

PySparkで `display()` 関数を使用する際のリスクとして注意すべき点はどれか。

`display()` はデータをドライバーにフェッチするため、集計されていない巨大なDataFrameをそのまま渡すと…

2026年3月8日

スタースキーマのパフォーマンスをDatabricksで最適化するために推奨される外部キー制約の設定はどれか。

Delta Lakeでは参照整合性制約の強制（Enforced）はサポートされていないが、`ALTER TABLE ... ADD CONSTR…

2026年3月8日

マルチタスクジョブにおいて、タスクAの出力をタスクBとタスクCで並列に実行させたい場合の設定はどれか。

Databricks JobsはDAG（有向非巡回グラフ）形式の依存関係をサポートしており、BとCが共にAに依存していれ…

2026年3月8日

DLTパイプライン設定で「Target Schema」を指定しない場合、テーブルはどこに作成されるか。

Target Schema（ターゲットスキーマ）を指定しない場合、作成されたテーブルやビューはパイプライン内部で…

2026年3月8日

Databricksの「Personal Access Token (PAT)」の有効期限管理において、ベストプラクティスはどれか。

セキュリティリスクを最小化するため、PATは短期間の有効期限を設定し、自動化にはトークンではなくServic…

2026年3月8日

Kafkaから読み込む際、`minPartitions` オプションを設定する主な目的はどれか。

Kafkaのパーティション数よりも多くのSparkタスクで並列処理したい場合、`minPartitions`を設定することで…

2026年3月8日

Unity Catalogの「Volumes（ボリューム）」の主な用途はどれか。

Volumesは、Unity Catalog内でS3やADLS上のディレクトリをオブジェクトとして管理し、非構造化ファイルに…

2026年3月8日

Photonエンジンが最も効果を発揮するワークロードはどれか。

PhotonはSQLクエリやDataFrame APIの基本的な演算（Join, Aggregation, Filter）をC++で高速化するように…

2026年3月8日

Deltaテーブルの「Z-Ordering」を実行する際に選択すべきカラムの特徴はどれか。

Z-Orderingは、指定されたカラムの値が近いデータを物理的に同じファイルセットに集めるため、そのカラム…

2026年3月8日