はてなブックマーク に追加 Yahoo!ブックマーク に登録 livedoorクリップ に追加 Delicious に追加

検索エンジンロボット拒否タグ

Last Update : 2008/06/xx

検索エンジンロボットの拒否のMETAタグ

 HTMLファイルのHEADタグ内のMETAタグ(メタタグ)で指定する検索エンジンロボット(検索エンジンクローラー)の"拒否"に関連した「Robots Exclusion Protocol」(「REP」:ロボット排除プロトコル)のMETAタグに指定するCONTENT属性値名一覧。

 拒否系としては、もともと「NOINDEX」と「NOFOLLOW」だけが定義されてましたが、検索エンジン側の独自拡張で増えてきた経緯があります。2008年6月、日本の3大検索エンジン「Yahoo!」(ヤフー)、「Google」(グーグル)、「Microsoft Live Search」(Liveサーチ)の3社は共通仕様を発表しました(赤項目)。

属性値 拒否内容 Yahoo!
"Slurp"
Google
"Googlebot"
Live Search
"MSNBot"
Ask.com
"Teoma" ※2
Baidu
"Baiduspider"
NONE (NOINDEX+NOFOLLOW) O O O O O
NOINDEX インデックス O O O O O
NOFOLLOW リンク先巡回 O O O O O
NOARCHIVE キャッシュ表示 O O O O O
NOCACHE - - O - -
NOSNIPPET スニペット表示 X O X X X
NOODP ODPの引用 O O O - -
NOYDIR Yahoo!カテゴリの引用 O - - - -
NOIMAGEINDEX 画像のインデックス - O - - -
NOTRANSLATE Google 翻訳拒否 ※1 O
unavailable_after:〜 インデックス (期日指定) X O X X X
※1 NAME属性に指定する文字列は, 「Googlebot」ではなく「Google」.
※2 日本の「Ask.jp」はYahoo!エンジン.

□ その他
 Hatenaアンテナの更新チェック拒否「NODIFF属性」。これ以外に、「NOIMAGECLICK」(旧AltaVista)、「NOMEDIAINDEX」(Live Search検索プレビュー機能→廃止)、「NOSERVE」(効果不明)というようなものが存在していたようですが、基本的に現在対応しているウェブ検索エンジンは存在しない模様。

.

METAタグの記述サンプル

 テキトーなサンプル。HTMLファイル内の<head>〜</head>間に記述します。指定するときの大文字・小文字は、別に関係なし。複数指定する場合は、「,」(コンマ)で区切ります。

<meta name="robots" content="none">
<meta name="robots" content="nofollow,noarchive">
<meta name="robots" content="index,nofollow">
<meta name="googlebot" content="none">
<meta name="slurp,msnbot" content="nofollow">
テキトーなインデックス実験
NOARCHIVE NOCACHE NOSNIPPET NOIMAGEINDEX IMAGEINDEX

.

¤ 関連 : 検索エンジン登録 | サイトマップ作成

.

Copyright © 2005-2008 Kpan. All rights reserved.