https://netafull.net/wordpress/0139199.html
対話型生成AIのChatGPTを提供するOpenAIのクローラーが、あまりよろしくない挙動をしているというのを見かけたので、WordPressのプラグインを用いてrobotsを記述し、OpenAIからのクローラーをブロックしてみたという話です。
ネタフル グルメ&テック
- WordPressでrobotsを編集する方法
- WordPressのプラグインを検索したところ「WP Robots Txt」という、robots.txtを編集するプラグインがあったので、これを使用
- 「WP Robots Txt」プラグインをインストールして有効化すると、WordPressのメニューの「設定」にある「表示設定」に「Robots.txt Content」という項目が追加