Googleサイトマップ、「robots.txt」ファイル分析を追加

Google Sitemap、キャッシュに保存されたrobots.txtファイルの分析結果を表示する機能を追加。robots.txtが適切に処理されているかを確認可能に。

2006年02月07日 12:50 | Google 06 | TrackBack (0) |

XMLを使ってGoogleデータベースにサイトをまとめて登録できるGoogle Sitemap（グーグル・サイトマップ）の新機能として、robots.txt分析が追加された。

robots.txtは、サイト内におけるクローラ（ウェブページを収集するロボット）の動作を制御するためのファイル。Googleの検索インデックスに登録したくないフォルダやファイルがある場合に文法に従って記述する。

robots.txtファイル分析は、サーバに設置されたrobots.txtをGooglebotが取り扱った処理結果を表示する。Googlebotが最後にrobots.txtファイルにアクセスした時間やステータスコード、Googlebotが認識できたクロール禁止フォルダ／ディレクトリ情報を参照可能だ。

robots.txtに記述した通りにGooglebotが動作しているかを把握するために利用できるだろう。

Googleサイトマップ
https://www.google.com/webmasters/sitemaps/

最新の検索エンジン業界ニュース

▼[PR] 「検索にガンガンヒットさせるSEOの教科書」好評発売中
▼ネイバー、新検索サービスのクローズドβユーザ募集開始
▼GoogleからYouTubeへの訪問者、80%以上がナビゲーショナルクエリ以外で流入 - Jストリーム調査
▼グーグル、「検索エンジン最適化スターターガイド」日本語版公開
▼米MS BingのTV CM （動画）
▼米MS、モバイル検索「Bing for mobile」公開 - PCページの閲覧性高める機能搭載
▼BingやTwitterが中国でアクセス不能に
▼アイレップ、検索特化型分析ツール「Enquisite Optimizer」販売開始
▼「SEMリサーチ」トップへ戻る

免責事項：SEMリサーチは、本記事中で触れている企業、商品、サービスの全てについて一切の保証をしておりません。各自の判断でご利用下さい。