16<meta>要素の記述

※⑧サンプルコード（検索エンジン用）
<meta name="ROBOTS" content="ALL" />
<meta name="ROBOTS" content="INDEX, FOLLOW" />
<meta name="ROBOTS" content="INDEX, NOFOLLOW" />
<meta name="ROBOTS" content="NOINDEX, FOLLOW" />
<meta name="ROBOTS" content="NOINDEX, NOFOLLOW" />
<meta name="ROBOTS" content="NONE" />

メタタグrobots
以下の記述で、OKはインデックス可、NOはインデックス不可。
<meta name="robots" content="index,follow">

このページはOK　このページからのリンク先ページもOK
同じ効果：<meta name="robots" content="all">
<meta name="robots" content="index,nofollow">

このページはOK　このページからのリンク先ページはNO
<meta name="robots" content="noindex,follow">

このページはNO　このページからのリンク先ページはOK
<meta name="robots" content="noindex,nofollow">

このページはNO　このページからのリンク先ページもNO
同じ効果：<meta name="robots" content="none">
<meta name="robots" content="noarchive">

このページは、すべてのロボットにキャッシュさせない
<meta name="googlebot" content="noarchive">

このページは、Googleのロボットだけにキャッシュさせない
ロボット巡回

これらのメタタグが記述されていない場合は、ロボットは巡回する。つまり普通には何もせずに、
巡回拒否する場合のみ記述するわけだ。

ところで、これらの記述も絶対的ではないようである。
これらのメタタグを無視する行儀の悪いロボットもあるらしい…