HOME
Lv013

「Lv013」の記事一覧

Spark Connectを使用する場合、クライアント側のコード（IDE等）が実行される場所はどこか。

Spark Connectでは、クライアントコードはローカル（IDEやノートブック）で実行され、DataFrame操作がgRPC…

2026年3月8日

「Data Skipping」が機能するために、Delta Lakeが自動的に収集する統計情報はどれか。

Delta Lakeはファイルごとに各列の最小値と最大値をメタデータとして保存し、クエリのWHERE句がその範囲外…

2026年3月8日

Databricks Jobsにおいて、タスク間でファイルを共有するために推奨されるパスはどれか。

クラスターのノード間やタスク間（別のクラスターで実行される場合含む）でファイルを永続的に共有するに…

2026年3月8日

Delta Live Tablesにおける「Materialized View（実体化ビュー）」と「Streaming Table」の使い分けとして正しいものはどれか。

Streaming Tableはストリームソースからの増分処理（Row-by-row）に最適であり、Materialized Viewはクエ…

2026年3月8日

Databricks SQL Warehouseの「Serverless」タイプにおいて、コールドスタート時間を短縮するための技術はどれか。

Serverless SQL Warehouseは、Databricksが管理するウォームアップ済みのコンピュートプールから即座にリ…

2026年3月8日

Unity Catalogで、S3やADLS上のデータにアクセスするための「Storage Credential」を作成できる権限を持つ役割はどれか。

Storage Credentialはクラウドストレージへのアクセスキーを含む機密性の高いオブジェクトであるため、作…

2026年3月8日

Deltaテーブルに対して `RESTORE` コマンドを実行した後、再度未来のバージョンに戻すことは可能か。

`RESTORE` コマンドは、指定した過去の状態に戻す操作を「新しいコミット（バージョン）」として記録する…

2026年3月8日

Structured Streamingの出力モード「Update Mode」の挙動はどれか。

Update Modeは、Watermarkを超えて確定した集計結果や、前回のバッチ以降に更新された行だけをシンク（出…

2026年3月8日

「Medallion Architecture」において、Silver層の主な役割はどれか。

Silver層は、Bronze層の生データをフィルタリング、クレンジング、結合し、信頼できる「エンタープライズ…

2026年3月8日

Adaptive Query Execution (AQE) の「Optimizing Skew Join」機能が自動的に行う処理はどれか。

データが偏っている（スキューしている）パーティションを検出し、それを小さく分割（Split）し、結合相手…

2026年3月8日