HOME
Databricks Certified Data Engineer Professional

「Databricks Certified Data Engineer Professional」の記事一覧

PySpark UDF内で外部APIを呼び出す際のパフォーマンス上のボトルネックは何か。

通常のUDFで行ごとにAPIコールすると極めて低速になるため、`mapPartitions`などを使って接続を再利用する…

2026年3月8日

ディメンショナルモデリングにおける「Conformed Dimension」の定義はどれか。

Conformed Dimension（整合性のあるディメンション）は、異なるビジネスプロセス間での分析の一貫性を保証…

2026年3月8日

`OPTIMIZE` コマンドにおける `MINORDER` オプション（または関連設定）の役割は何か。

（補足：Z-Orderingとは別に）ファイルサイズの閾値を調整し、小さすぎるファイルを作らないように制御す…

2026年3月8日

「Serverless SQL Warehouse」を使用する主な利点はどれか。

Serverlessコンピュートは、クラウドプロバイダのリソースを即座に割り当てるため、従来のクラスター起動…

2026年3月8日

「Medallion Architecture」において、Gold層のデータが満たすべき要件はどれか。

Gold層は、特定のレポートやMLモデル向けに高度に加工・集計され、ビジネス価値を直接提供できる状態のデ…

2026年3月8日

Databricks Asset Bundles (DABs) の設定ファイル `databricks.yml` で定義できるリソースに含まれないものはどれか。

DABsはインフラやワークフローをコード定義するものであり、セキュリティ上の理由からユーザーパスワード…

2026年3月8日

RocksDB State Storeを有効にすべきシナリオはどれか。

RocksDBはネイティブメモリとローカルディスクを使用してステートを管理するため、GCの影響を受けずに大規…

2026年3月8日

「Dynamic View」において、ユーザーが特定のグループに属しているかを判定する関数 `is_account_group_member()` が `is_member()` と異なる点はどれか。

`is_account_group_member`はUnity Catalogのアカウントコンソールで定義されたアカウントレベルのグルー…

2026年3月8日

Delta Lakeの `MERGE INTO` 文において、ターゲットテーブルに重複キーが存在する場合の挙動はどうなるか。

ON句の条件に一致する行がターゲット側に複数ある場合、どのソース行を適用すべきか不明確になるため、標…

2026年3月8日

Time Travel機能を使用して過去のデータをクエリする際、バージョン指定に使用する構文はどれか。

SQLでは`VERSION AS OF `または`TIMESTAMP AS OF `を使用して過去のスナップショットにアクセスする。

2026年3月8日