「Databricks Certified Data Engineer Professional」の記事一覧

Databricksの将来的なビジョンである「Data Intelligence Platform」の中核となる技術はどれか。

Delta Lakeの `VACUUM` コマンドで、データファイルが即座に物理削除されずに「Tombstone（墓石）」状態になる期間（デフォルトの削除遅延）はないが、クラウドストレージ側の挙動で注意すべき点は何か。

Databricksクラスターの「User Isolation（ユーザー分離）」モード（Shared Access Mode）で制限される機能はどれか。

PySparkの `df.rdd.map(…)` を使用してPythonコードを実行することのパフォーマンス上の欠点はどれか。

Databricks Jobsにおいて、Git連携したジョブのコードが更新された際、実行中のジョブはどうなるか。

「Data Mesh」における「Federated Computational Governance」とは何を意味するか。

Delta Live Tablesで、ソースデータがS3上の「CSVファイル」であり、カラムの増減が頻繁にある場合、推奨される読み込み方法はどれか。

Unity Catalogの「Service Principal」をジョブの所有者（Owner）にする主なメリットはどれか。

Structured Streamingで、結合（Join）において「Watermark」の遅延閾値を短くしすぎた場合のリスクはどれか。

Spark UIのExecutorタブで「GC Time（ガベージコレクション時間）」が全体の処理時間の10%を超えている場合、疑うべき原因はどれか。