■ 検索よけ・ロボットよけをしていますか?
- tentativelyは「検索よけ†」を行なっていません。
- tentativelyでは、基本的にロボット系検索サイトのクローラーの巡回を全面的に受け入れています。
- クローラーはHTMLファイルなどに張られたリンクをたどってサイトやページを巡る性質を持っています。
そのため、tentativelyに登録されたサイト(すなわちtentativelyからリンクを張られているサイト)も、クローラーの巡回対象となりえます。
- Googleなどのロボット系検索エンジンに絶対拾われたくないと思っていらっしゃるサイトオーナー様は、登録の是非を再確認して下さい
†「検索よけ」とは Google・Yahoo!・msnなどの所謂「全文検索型」「ロボット型」検索エンジンが、 クローラー・スパイダーなどと呼ばれる検索ロボットプログラムを使って Webページを巡回しておこなう情報回収を、 メタタグやrobot.txt、.htaccessなどを用いて拒否することです。
「ロボットよけ」「ロボット対策」「検索はじき」などとも呼ばれます。
このような設定は、 「狭くディープな『同志』にのみ見て欲しいサイト」 などで行なわれる事が多いようです。
|