SEMリサーチ

ヤフー、実験プロダクトを一般公開 - 「Yahoo!ラボ」開設

ヤフーは2009年6月10日、実験的なプロダクトを体験してもらうための「Yahoo!ラボ」サイトを開設した。

Yahoo!ラボは、新しい技術やアイデアを盛り込んだ開発中のプロダクトを一般のユーザに紹介・体験してもらうためのサイト。ユーザのフィードバックを得ながらYahoo! JAPANの新しいサービスの芽に育てていきたいとしている。

6月10日現在、画像を解析して抽出した特徴から、類似画像を高速検索する「VisualSeeker」、ある検索ワードを行ったユーザの男女比や年代・職業別の割合、検索頻度の時間別推移グラフを表示する「サーチのなかみ - 性・年代別」、検索クエリの発生地域を都道府県別に分析し、その検索率分布を日本地図上にグラフィカルに表示する「サーチのなかみ - 地域別」、検索結果に表示されるタイトルや要約文から、単語を選択して検索結果を上下に動かすなど検索結果を操作できる「Rerank」といったプロダクトが公開されている。

サーチのなかみ - 性・年代別・地域別

サーチのなかみ 「ウエディングドレス」

キーワードが検索された割合を性別・職業別・年代別・時間帯などで表示する。たとえば「ウエディングドレス」を見ると、検索者は男性：28.9%、女性：71.2%で、年代別で見ると男性が20代の32.9%が最多、女性は20代が50.2%と半数を占めているといったデータが表示される。また、男性と女性それぞれの時間帯別検索比率もグラフで現れ、男性は19～22時がピークだが女性は22～0時がピークとなっている。

同じ検索ワード「ウエディングドレス」を地域別でみると、Yahoo!JAPANのデータでは島根、和歌山、宮崎が検索率トップ3となっている。

VisualSeeker - スケッチ検索

VisualSeeker - スケッチ検索
検索クエリではなく、イラストや画像から類似画像を検索できる技術。Yahoo! JAPAN研究所が開発した。たとえば特定の物体やイメージの名前を知りたい時など、検索ワードが使えない、またはわからない時に利用できる技術。自分で写真をアップロードすると類似する画像を検索できるほか、スケッチ機能を使って絵を描いて検索することも可能。

Yahoo!ラボ
http://labs.yahoo.co.jp/

Yahoo!ラボがリリースされました
http://searchblog.yahoo.co.jp/2009/06/yahoo_90.html

はてなブックマークのSEO手法はスパムか？

はてなブックマークのやりすぎちゃったかもしれないSEO （ぼくはまちちゃん）

2000年頃まで流行していた、スパム的なクローキングというのを見たことがない人が多いでしょうから、この手のものを誤解する人が多いのも仕方ありません。しかし、はてなのケースは全く問題ありません。そもそも、クローラがアクセスしているURLを人間もアクセス可能ですから、この時点でもうクローキングうんうんの話ではないのですよ。

たとえば、次のURLはGoogleにインデックスされた文字列ですが、人間がクリックしてもクローラが見たコンテンツと同じものが表示されますので不利益はありません。

http://b.hatena.ne.jp/entry/8823661/Google%E3%80%81IP%E3%83%87%E3%83%AA%E3%83%90%E3%83%AA%E3%83%BC%E3%80%81%E3%82%B8%E3%82%AA%E3%83%AD%E3%82%B1%E3%83%BC%E3%82%B7%E3%83%A7%E3%83%B3%E3%80%81%E3%82%AF%E3%83%AD%E3%83%BC%E3%82%AD%E3%83%B3%E3%82%B0%E3%81%AB%E3%81%A4%E3%81%84%E3%81%A6%E8%A7%A3%E8%AA%AC%20::%20SEM%20R

参考：アフィリエイトリンクの転送先をユーザーとクローラで変更するのはクローキングスパム？

Amazonのアソシエイトプログラムの仕組みも同様に問題がありません。上記Web担フォーラムにて解説しているのであわせてお読み下さい。

ところで、bodyにキーワードを詰め込んだページをbotに見せる昔ながらのクローキングはNGでheader(url)にキーワードを詰め込んだページをbotに見せる、よりSEO的には凶悪なこの手法が「Google先生的にはオッケーなんじゃね？」なんて思い込む人が多いのはなんでなんだろう…？

タイトルと同じ文字列がURLに入っていることが、悪質であるとは客観的にいえないからです。また、URLにタイトルの文字列を入れて、それが何のコンテンツと関係あるかをクローラに明示することは、検索エンジンに対するアクセシビリティ改善と捉えることもできます。

検索エンジンがNGという「詰め込み」というのは、「転職、転職、転職、転職・・・」みたいなことを指します。

検索エンジンは、より適切な検索結果を表示するために「ページが何について記述されているか」を正しく理解する必要があります。はてなのケースは、URL内にもページの内容を記述して伝達しやすくしているともいえますから、これをもって検索品質を著しく落とす行為とはいえません。

Google自身が、件のガイドラインにどちらともとれる文章を掲げておきながら、上と同様の手法でキツイSEOを行っているAmazonをいつまでも放置(黙認?)しているあたりが一番の問題なのかもしれないね…！

ガイドラインは、あまりに明確に書いてしまうとそれをかいくぐって悪さをするスパマーが後を絶たないので、仕方ないんじゃないでしょうか。

最後にまとめますと、クローキングというのは、同じURLにアクセスしているにもかかわらず、ユーザとクローラで全く異なるコンテンツが表示されることを指します。

ブラックな手法のクローキングの要件は
(1) 同じURLでユーザとクローラで全く異なるコンテンツが表示される
(2) クローラ用のURLにユーザがアクセス不可（またはその逆）
を満たした時を指します。つまり、「検索結果に表示されるタイトル・説明文・URLと、クリックした後に見る内容の同一性」が求められています。この原則が守られないと、ユーザの予想に反したコンテンツへアクセスさせることになり、レリバンシーの低下を招きます。検索結果で料理の作り方と書いてあったのに、クリックしたらアダルトサイトだったら不満ですよね。だから検索エンジンは悪意あるクローキング行為を禁止※するのです。

今回のように、ユーザとクローラで異なるURLに転送しても、その転送先URLをユーザとクローラの両方がアクセスできる（今回のケースなら、タイトル文字列入りURLにユーザがアクセスできる）時点で、これはクローキングの要件を満たしません。また、検索結果で表示した内容とリンク先ページは同じですし、ユーザとクローラも同じコンテンツを見ていますので、ユーザに不利益はありません。URL文字列の挿入は、タイトル文字列をそのまま入れる行為である限り、それの悪質性を見いだすことはできません。むしろ、それを悪としたら世の中の善意で行っている多くの運営者のサイトを検索結果から閉め出すことになり、良質なウェブサイトを検索できなくなることは検索利用者にも検索会社にも不利益でしょう。

ということで、全然問題ないですよ、という話でした。

※　参考までに、検索業界でのクローキングに対する取り締まりは、Googleが最も厳しいと言われています。Yahoo!やMSは比較的寛容といいますか、「合理的な理由」として認める範囲が、Googleよりも広いです。