robots.txtの「Crawl-delay」ディレクティブを現在公式にサポートしている検索エンジンはどれか。

GoogleはCrawl-delayを無視するが、Bingなどはサーバー負荷軽減のためにサポートしている。

関連記事

関連記事はありません。