ImagesiftBotクローラーとは
トップページへ
ログに「ImagesiftBot; +imagesift.com」を見つけたので検索し、そのクローラーの公式サイト(英語)を見つけました。
下記はそれを日本語にしたうえで抜粋しています。
Q.ImageSiftBotとは?
A.Web上に公開されている画像をインターネットにスクレイピングするWebクローラーです
Q.ImageSiftBotはどのような情報を保存しますか?
A.次の情報を保存します
画像
ページ上のホストURLとテキスト
画像に関連付けられた代替テキスト
Q.集めた情報をどのように使うのか?
A.当社のWebインテリジェンス製品は、保存した情報をインデックスに使用し類似の画像の検索と取得を可能にします。
Q.ImageSiftBotはrobots.txtルールに従うか?
A.対象とする robots.txt の標準ディレクティブが尊重されます。
詳しくは公式サイト(英語)をご覧ください