HOMELv016 Structured Streamingにおいて、メモリ使用量が無制限に増加する「ステート爆発(State Explosion)」を防ぐために必須の設定はどれか。 2026年3月8日 Watermarkを設定しないと、エンジンは「遅れたデータがいつか来るかもしれない」と判断し、古いステートをメモリから破棄できず、OOMの原因となる。 Delta Lakeの `OPTIMIZE` コマンドが実行された際、統計情報(Statistics)はどうなるか。 「Spark UI」のSQLタブで、ノードの色が「赤色」で表示されている場合、何を示唆しているか。