Webサイトのルートディレクトリに配置され、検索エンジンのクローラーに対してアクセス制限を指示するファイルはどれか。

robots.txtは検索エンジンのクローラーに対して、サイト内のどの部分をクロールしてはいけないかを指示するファイルであり、隠しパスの発見に役立つことがある。