robots.txtファイルを確認する主な目的はどれか。

robots.txtには検索エンジンから隠したいディレクトリが記載されていることがあり、攻撃のヒントになる。