メインフレームからCOBOLバッチ処理をGKE上のマイクロサービスに移行する際、バッチジョブの依存関係管理やスケジュール実行、リトライ制御を行うために、クラウドネイティブなアプローチとして適したツールはどれか。

Cloud Storageをデータレイクとして使用している。特定のパートナー企業に対し、バケット内のデータを直接アップロードさせたいが、Googleアカウントの作成を強制したくない。また、アップロードは特定のプレフィックス（フォルダ）のみに制限したい。最適な方法はどれか。