HOME
Databricks Certified Data Engineer Professional

「Databricks Certified Data Engineer Professional」の記事一覧

「Deletion Vectors」を有効にしたDeltaテーブルでの削除操作の特徴はどれか。

Deletion Vectorsを使用すると、行を論理的に削除済みとしてマークするだけで済むため、物理ファイルの書…

2026年3月8日

CDC（Change Data Feed）データにおいて、更新前の行の状態を示す「_change_type」の値はどれか。

`update_preimage`は更新操作が行われる直前の行の状態を表し、`update_postimage`が更新後の状態を表す。

2026年3月8日

クラスターポリシー（Cluster Policies）を強制する主な目的はどれか。

高価なインスタンスタイプの使用禁止やタグ付けの強制などにより、コスト超過を防ぎ、組織のセキュリティ…

2026年3月8日

Unity Catalogで、特定のグループに対してのみ行を表示する「行レベルセキュリティ」を実装する際、フィルター関数定義には何が必要か。

行フィルター関数は、関数作成者の権限（DEFINER）または呼び出し元の権限（INVOKER）で実行されるかを選…

2026年3月8日

DLTパイプラインをPythonで定義する際、複数のフローを動的に生成（メタプログラミング）する方法として適切なものはどれか。

Pythonのループ構造を使用して、リストや辞書定義に基づき`@dlt.table`デコレータを持つ関数を動的に定義…

2026年3月8日

Auto Loaderにおいて、入力ファイルのパスなどのメタデータ列を含めるために使用するオプションはどれか。

このオプションを有効にすると、`_metadata`という列が追加され、ファイルパスや作成時刻などの情報にアク…

2026年3月8日

「Skew Join Optimization」ヒントを使用すべき状況はどれか。

特定のキーにデータが偏っている場合、その処理を行うタスクがボトルネックになるため、Skew Joinヒントで…

2026年3月8日

Databricks Jobsにおいて、タスクAで計算した値をタスクBに渡すために使用する機能はどれか。

`dbutils.jobs.taskValues`を使用することで、ジョブ内のタスク間で小さな値やメトリクスを受け渡すことが…

2026年3月8日

「Column Mapping」を有効にすることで可能になる操作はどれか。

Column Mappingは、物理データファイルと論理メタデータの間にマッピング層を設け、全データの書き換えな…

2026年3月8日

Structured Streamingで「foreachBatch」を使用する主な利点はどれか。

foreachBatchを使用すると、各マイクロバッチのDataFrameに対して、標準的なDataFrame書き込みAPIやロジッ…

2026年3月8日