ClaudeBotをブロック(Disallow)したい
トップページへ
当サイトの場合、2024年4月くらいからひんぱんにクロールし始めた「ClaudeBot(クロードボットか?クラウドボットか?)」。
2024年5月22日に、以下のサイトのクローラーと判明
https://support.anthropic.com/ja/
robots.txtによるブロックの方法の解説ページもありました。
現在はrobots.txtでブロックしていますが、
robots.txtでブロックする以前に判明した CaludeBotが使用していたIPアドレスの一覧です
deny from 13.58.15.223
deny from 13.58.108.102
deny from 13.58.130.219
deny from 13.59.1.40
deny from 13.59.154.143
deny from 13.59.6.153
deny from 18.116.42.158
deny from 18.188.113.80
deny from 18.188.119.119
deny from 18.188.29.49
deny from 18.189.143.228
deny from 18.190.152.38
deny from 18.190.176.78
deny from 18.191.208.181
deny from 18.217.248.255
deny from 18.219.67.169
deny from 18.221.134.38
deny from 18.221.49.8
deny from 18.224.62.6
deny from 18.225.55.151
deny from 18.227.111.33
deny from 3.12.108.18
deny from 3.12.150.250
deny from 3.12.152.164
deny from 3.12.155.148
deny from 3.12.163.0
deny from 3.138.123.238
deny from 3.139.80.15
deny from 3.14.253.106
deny from 3.141.166.242
deny from 3.141.197.212
deny from 3.141.30.211
deny from 3.142.173.72
deny from 3.142.195.225
deny from 3.142.43.206
deny from 3.144.39.93
deny from 3.145.156.204
deny from 3.145.179.187
deny from 3.16.137.108
deny from 3.23.87.113
deny from 52.14.23.173
deny from 52.15.134.57
deny from 52.15.46.81