|
ロボット型サーチエンジンについて
ロボット型サーチエンジンへの登録について
2002年11月15日以降、アレスネットのWebサーバーは全てロボット型サーチエンジンによる巡回を許可致しております。
ただし、どこからもリンクされていないホームページなど、自動登録されない場合は各サーチエンジンへ手動での登録を行ってください。
|
自動巡回 Robot からのリクエストを拒否するための設定
新サーバーのお客様で自動登録を希望しない場合は、下記をご参照ください。
●拒否するための設定について
自動巡回 Robot からのリクエストの拒否するためには、「METAタグによるロボット排除規格」の設定により排除可能となります。
設定する場合、拒否する各々の HTML 文書の<HEAD> - </HEAD>内に、METAタグを記述します。 |
<META NAME="ROBOTS" CONTENT="NOINDEX">
このように記述すると、この HTML 内の文書は引用されません。
つまり、ロボット系検索エンジンにも登録されません。 |
<META NAME="ROBOTS" CONTENT="NOFOLLOW">
このように記述すると、この文書からのリンクを辿りません。
ただし、この HTML 文書自体は引用される可能性はあります。 |
|
●設定例
特定のページだけ拒否する場合、対象となるページの<HEAD> - </HEAD>内に記述
<HEAD> <META NAME="ROBOTS"
CONTENT="NOINDEX"> </HEAD> |
あるページ以降リンクを辿らなくする場合、対象となるページの<HEAD>
- </HEAD>内に記述
<HEAD> <META NAME="ROBOTS"
CONTENT="NOFOLLOW"> </HEAD> |
完全に拒否する場合、全ページの<HEAD> - </HEAD>内に記述
<HEAD> <META NAME="ROBOTS"
CONTENT="NOINDEX">
<META NAME="ROBOTS" CONTENT="NOFOLLOW"></HEAD>
|
|
[ご注意]全ページを拒否する場合には、上記の「完全に拒否する場合」の設定を、全ページに設定する必要があります。
●注意事項
| 若干「METAタグによるロボット排除規格」により、排除できないロボットがありますが、そのようなロボットの場合Robots.txt
による排除もできないことがほとんどです。予めご了承ください。 |
|
