HOME
Databricks Certified Data Engineer Associate

「Databricks Certified Data Engineer Associate」の記事一覧

Deltaテーブルにおいて、個々の小さなParquetファイルを物理的に削除し、ストレージ容量を解放する操作はどれか。

VACUUMはトランザクションログで不要と判断された古い物理ファイルを削除して容量を確保します。

2026年3月8日

Auto Loaderで、ファイルが削除された場合でもターゲットテーブルに反映させないのはなぜか。

Auto Loaderは新しいファイルの追加を検知して処理する増分取込専用のツールであるため、削除は同期しませ…

2026年3月8日

SQLクエリの結果が特定のしきい値を超えたときに、メールで通知を送る機能はどれか。

SQLアラート機能を使用すると、データの状態変化を自動的に監視し通知を受け取ることができます。

2026年3月8日

Unity Catalogにおいて、スキーマやテーブルの「所有者」を変更できる権限を持つのは誰か。

オブジェクトの所有権を変更できるのは、そのオブジェクトの現在の所有者か、管理者のみです。

2026年3月8日

DLTで作成されたテーブルを外部のDatabricks SQLから参照するために必要な操作はどれか。

DLT設定でターゲットスキーマを指定し、Unity Catalog等にテーブルを登録することで外部参照が可能になり…

2026年3月8日

データの出所や変更履歴を追跡し、信頼性を担保する仕組みを何と呼ぶか。

データリネージにより、生データから最終的な分析レポートに至るまでの変換プロセスを可視化できます。

2026年3月8日

ストリーミング処理で、ある時間枠内のデータが揃うのを待つ時間を制御するための設定はどれか。

ウォーターマークを設定することで、どの程度の遅延データまでを計算に含めるかを定義します。

2026年3月8日

複数の行の値を1つの配列に集計するために使用する集計関数はどれか。

collect_list関数は、グループ内の指定された列の値をすべて集めた配列を返します。

2026年3月8日

Delta Lake 3.0以降で導入された、Delta、Iceberg、Hudiの各形式でデータを読み書き可能にする機能はどれか。

UniFormを使用すると、Delta Lakeのデータを変換なしでIcebergやHudiのクライアントから読み取れるように…

2026年3月8日

ジョブの特定のタスクが成功した後に、複数のタスクを並列に実行するように設定することは可能か。

Databricksジョブでは、1つのタスクに対して複数の後続タスクを定義し、並列に実行できます。

2026年3月8日