ロボットの巡回について

”メタ”をmetaにして使用

◇そのぺージとそこからリンクしているページの両方とも巡回拒否
<メタ name="robots" content="none" />

◇そのぺージのみＯＫ、リンクを辿るのは拒否
<メタ name="robots" content="index,nofollow" />

◇そのページの登録を許可する
<メタ name="robots" content="index" />

◇リンクを辿るのはＯＫ、そのページを指定するのは拒否
<メタ name="robots" content="noindex" />

◇下部階層ページの巡回を許可する
<メタ name="robots" content="all" />

◇そのページとリンクされている全てのページの検索を許可する
<メタ name="robots" content="index,follow" />
※infoseekは「follow」を指定してもサイト内のリンクは巡回してくれません。

◇このページを登録しないが、ページ内のリンク先は巡回を許可する
<メタ name="robots" content="noindex,follow" />

◇そのページ内の画像が検索対象となるのを防ぐ
<メタ name="robots" content="noimageindex" />

◇そのページ内の画像への直接リンクを防ぐ
<メタ name="robots" content="noimageclick" />

◇検索ロボットに後日、再巡回させる
<メタ name="revisit_after" content="30 days" />
※ロボットが訪れた際に後日再度訪問させたい場合に記述します。上記例（30日後にまたきてね）

◇閲覧者のブラウザのキャッシュを制御する
<メタ http-equiv="pragma" content="no-cache" />
※ページがブラウザ側にキャッシュされるのを防ぎ、アクセスする度に最新のページを読み込ませる事ができます。

◇ページ内容の期限切れを伝える
<メタ name="expires" content="December 25, 2004" />
※コンテンツの有効期限切れの日付を入力します。期限切れの場合、検索ロボットはデータベースから削除します。

◇閲覧対象年齢層の指定
<メタ name="rating" content="adult" />
※そのページが対象とする利用者層を指定します。利用者の指定がなければ"general"と記述します。
※未成年者用記述に、"child"、"safe for kids"があります。　※上記例（未成年者閲覧禁止）

◇指定ページをロードする
<メタ http-equiv="refresh" content="30；URL=ロードしたいページのＵＲＬ" />
※contentで指定した値（上記例、30秒）の時間経過したら、指定したＵＲＬを表示します。時間とURLは ；（セミコロン）で区切って、
両方ともcontent=の""で囲まれた中に書きます。別ページへ自動ジャンプすることができるので、ページが移転したときなどに
使うと便利です。但し、検索エンジンにスパム行為と取られデータから削除されてしまう事もあるので注意が必要です。