米Googleは2013年3月1日、同社の検索評価担当者のトレーニングに使用している資料「検索品質評価ガイドライン」を初めて公式に公開した。How Search Works のページからダウンロードすることができる。
検索品質評価ガイドライン(Search Quality Rating Guidelines)とは、検索品質を客観的に評価するために同社が外部に委託している、検索評価担当者向けのトレーニング用資料。この仕事は、たとえば与えられたキーワードと、それに適合する数十のURLを見て、それぞれのURLとキーワードの関連性の程度を採点するといったものだ。外部の評価ユーザーは世界中に5000人あまりいるといわれている。日本国内でも時折、該当の求人広告を見かける。
ところでこの資料は、評価者向けの資料であるため外部には非公開のものだったが、過去にたびたび、流出してインターネットに一般公開されて注目されてきた経緯があった。
検索品質評価ガイドライン(PDF)
http://www.google.com/insidesearch/howsearchworks/assets/searchqualityevaluatorguidelines.pdf
#
一度も見たことがない人は、目を通しておくといいかもしれません。