2008-07-16 検索エンジンがクローラーのIPアドレスを公開する意味って? モバイル版Yahoo!検索クローラーのUserAgentはこれまでも公開されていた。今回ヤフーは、モバイルサイトではIPアドレスでアクセス制御を実施しているケースが多いと考えられることからクローラーのIPアドレスも公開したとしている。 こういう情報を検索エンジンが公開するメリットがよくわからないんですが、「サイト管理者の皆さんはIPアドレスでのアクセス制御で自分のところのロボットが弾かれないように設定してくださいね」ということなんでしょうか。かえってクローキングするサイトが増えるような気がしますが……。