はまちや２さんの日記
mixiがクローキングしちゃってる2007/01/07 [23:39]
Googleで「mixi」を検索してみました！
すると、上からいくつかのところに「mixi(ﾐｸｼｨ)ﾓﾊﾞｲﾙ」の文字がでてくるよね！
うんうん…え、あれれ！
検索結果の要約のところに、しっかりとコンテンツの一部がでちゃってるよ！ なんで！
たしか http://m.mixi.jp/ って、PCで見にいっても
このページへは携帯電話からのみアクセスできます。
パソコンのサイトはこちら
なんて出るだけだったと思うんだけど…！
なのになんで Google は中身を取得できてるの！
ちなみにこのmixiモバイルって、
User Agent を 「DoCoMo/2.0 SH903i(c100;TB;W30H20)」 に変更したくらいでは
中身をみせてもらえません＞＜ IPアドレスで制限してるのかな…！
ふしぎふしぎ！どうなってるのこれって思って、User Agent を「google」に変更してみました！
すると…！
わ！ちゃんとでた！
つまりこれが、噂に聞くクローキングですか＞＜
なんだか聞き慣れない言葉だけど、SEOの超必殺技だそうです！
http://www.sem-r.com/sem/seo/20030825212612.html
によると…
要は「検索エンジンクローラー（Crawler）がウェブページにアクセスしてきた時と、人間がアクセスしてきた時に異なるウェブページを見せる」のです
Google はクローキングはスパム行為であるとの見解をとっています。
従って、もし Google にクローキング利用が見つかった時にはドメインごとインデックスから削除されてしまいます
ってことらしいよ！ なんか怖いね！
でもほんとかな！ Googleのガイドラインもちょっとみてみますね…！
http://www.google.com/support/webmasters/bin/answer.py?answer=35769
品質に関するガイドライン - 具体的なガイドライン
・クローキングや不正なリダイレクトを行わない。
サイトが品質に関するガイドラインに従っていない場合、インデックスから除外されている可能性があります
Google の品質に関するガイドラインに従っていないと思われるサイトがありましたら、
次の URL までご報告ください。
http://www.google.co.jp/webmasters/spamreport.html
わーほんとだね！
もしこれが「混乱を防ぐためにGooglebotクロール時には携帯端末でアクセスしたのと同じ内容を表示している」とかで通っちゃうのなら、
ぼくのサイトも「当サイトを閲覧するのに最適な、’はまちブラウザ’で表示する時と同じ内容をGooglebotにも出力している」っていうのが通っちゃうよね…！
ってことは、mixiって Googleのインデックスから削除されちゃうんですか＞＜
なまえ 2007/01/08 [00:00]
さすがにログインは出来なさそうだね。。
2007/01/08 [01:07]
>mixiって Googleのインデックスから削除されちゃうんですか
むしろそれが狙いであるとか？
名無しさん 2007/01/08 [04:00]
あれだな、AUに対するSEO対策とかいいだすんだろうなぁ。
名無しさん 2007/01/08 [07:07]
携帯からmixiをGoogle検索したときに携帯用コンテンツのカテゴリに表示させるために
Googlebotには携帯用サイトであることを認識させたいんだろうね
名無しさん 2007/01/08 [11:16]
googleはAUの公式エンジン、かつ、MIXIはAUの公式サイトなので、AU向けに開放するようにされているのでは？KDDIからIPの開示とか、いろいろありそう。
名無しさん 2007/01/08 [11:17]
↑つまり、携帯公式サイトならではの特殊事情がありそうってことです。
名無しさん 2007/01/08 [22:32]
au公式SNSはGREEだったような…
でも確かに、auの検索はgoogleエンジンなので、mixi的にはモバイルmixiをヒットさせるように仕組むのはアリかもしれませんねぇ
名無しさん 2007/01/09 [22:08]
ぼっちゃん、ホワイトなクローキングはアリなのよ。たとえば、クローラに対してのみリスト表示を1ページに全件表示するなど普通にあるね。
はまちや２ 2007/01/09 [23:08]
はいこんにちは！ みなさまコメントありがとう！！
なるほど！
てことは、公式サイトってのはさすがに難しいとしても、
「携帯向けサイト」さえうたっちゃえば…、
「うちは本来、携帯向けのサイトなんです、だからGooglebotにも携帯と同じコンテンツを出力します(実はこちらがキツイSEOを施したもの)。ただしPCユーザーには制限されたコンテンツのみ出力しています(実はこちらが本当に出したいもの。例えば出会い系やエロバナーの類)
なんてことができちゃうよね。
ええと、あとはあれですか。
なんかすごくつっこみどころ満載のコメントいただいちゃったんで
ネタなのかよくわかんないんですが、一応マジレスいたしますね！
まず、ホワイトなって何でしょう！
ぼくはクローキングに関して、あまり色を感じないタイプなんですが、
ええと善悪ってことですかね！
だとしても、今回のmixiの例も、おじさまが出した例も、
少なくともぼくには善も悪も特に感じませんごめんなさい。
ただ、「クローキングだな」と思うだけなんです＞＜
で、そのホワイト(?)ならアリっていう、すてきな情報は
どこのGoogleの公式見解でしょうか。
ぼくに発見できたのは結局、
「Googleはクローキングをガイドライン違反とする」
という文だけでした…！
なので、ソースみたいなもの、できれば公式の見解が書かれているURLを教えてもらえれば、すごく助かります！
おねがいしちゃいますね！
あ、まさかとは思いますが、
一日3万PV程度とかの、どこかの弱小サイトがそうしてて生き残ってるから、
とかって理由じゃないですよね！ もちろん！
具体的な情報まってますね！ 信じてますよ！
はまちや２ 2007/01/10 [00:01]
何故か突然、面白いくらい順位が落ちたね！
いま２ページ目！ 一時的なものなのかな、よくわからないけど。
あと、ページランクって、もとからゼロだったっけ？
BlogPetのしめさば 2007/03/08 [14:00]
はまちや２ xxが文字がでる？