HOME
Databricks Certified Data Engineer Professional

「Databricks Certified Data Engineer Professional」の記事一覧

Deltaテーブルの `delta.enableChangeDataFeed` を後から有効にした場合、それ以前の変更履歴はどうなるか。

CDF（Change Data Feed）は有効化された時点からの書き込み操作に対して追加のメタデータを記録し始めるた…

2026年3月8日

`spark.sql.execution.arrow.pyspark.enabled` を `true` に設定する効果はどれか。

この設定により、`toPandas()` やPandas UDFの実行時に、行指向ではなく列指向のメモリフォーマット（Arro…

2026年3月8日

Databricksの「Audit Logs（監査ログ）」を配信・保存するための設定場所はどこか。

監査ログはアカウント全体に関わるセキュリティ機能であるため、アカウントコンソールでS3バケット等の配…

2026年3月8日

Databricks Jobsの実行が失敗した際、自動的に再試行させるための設定はどれか。

タスク設定の「Retries」ポリシーで回数と間隔を指定することで、一時的なエラー（ネットワーク瞬断など）…

2026年3月8日

3NF（第三正規形）と比較した際の、ディメンショナルモデリング（スタースキーマ）の主な利点はどれか。

スタースキーマは意図的に非正規化を行い、結合数を減らすことで、分析クエリ（OLAP）のパフォーマンスと…

2026年3月8日

Unity Catalogの「External Volume」と「Managed Volume」の主な違いはどれか。

External Volumeはユーザーが所有するクラウドストレージ上のパスを登録するのに対し、Managed VolumeはUn…

2026年3月8日

Databricksで「CDC (Change Data Capture)」を実装する際、ソースから削除されたレコードをターゲットにも反映させるために必要な情報はどれか。

ターゲット側で `MERGE` 文を使って削除を実行するには、どの行を削除すべきか特定するためのキーと、それ…

2026年3月8日

Structured Streamingにおいて、トリガー間隔を短くしすぎること（例：1秒以下）の弊害はどれか。

各マイクロバッチの開始・終了処理やオフセット管理には固定コストがかかるため、極端に小さなバッチはCPU…

2026年3月8日

「Bucketing（バケッティング）」が推奨されるシナリオはどれか。

バケッティングは、データを結合キーに基づいて事前にハッシュ分割・保存しておく技術であり、後の結合操…

2026年3月8日

「Databricks Runtime for Machine Learning (ML)」に含まれているが、標準Runtimeには含まれていない主な機能はどれか。

ML Runtimeには、PyTorch, TensorFlow, Scikit-learnなどの主要MLライブラリと、MLflow、AutoML機能が最適…

2026年3月8日