サイトへのクローラーのアクセスを制御する仕組みとして『robots.txt』というものがあります。

これは、検索エンジンのクローラーのサイトへのアクセスを制御するためのファイルのこと。

アクセスを制御することで、クローラーが余計なページをクロールするのを防ぎ、重要なページを中心にクロールさせることを目的としています。

この『robots.txt』、WordPressでは自動的に生成されるのですが、SEO対策のため自分で記述したいという方もいるかと思います。

FTPソフトを使って、テキストファイルをアップロードするだけなので、自分で設定することはそれほど難しい話ではないのですが、プラグインを使うと面倒な手間なく記述することができるので便利。

【Robots.txt Editor】は、『robots.txt』を管理画面から編集することのできるプラグイン。

『robots.txt』を管理画面から編集することができるので、FTPソフトを使用するなどといった手間がなくなります。

インストール

または、配布サイトからダウンロードして、インストール。

手動でインストールする方法はコチラ

robots.txtを編集する方法

動作確認環境

まとめ