旧フォーラムの記事です http://blog.fc2.com/forum/viewtopic.php?f=6&t=441
CFDN 2005-04-24 14:04:24
件名 ：検索エンジンで検索出来ない
一部のディレクトリ登録型の検索エンジン以外、自動でロボットと呼ばれるプログラムがクロールしています。
現時点で検索結果に反映されていない場合も、早い、遅いの差はありますが、いずれ自動で登録されます。
Googleではクロール先を登録出来るので、気になる方は自分で登録しておけば自動で巡回してくれるようになります。
http://www.google.co.jp/intl/ja/addurl.html
Yahoo!に代表されるディレクトリ型検索は自薦・他薦で審査を受け、承認される必要があります。自動では登録されません（Yahoo!には自動型のYSTもあります）。
SEOと呼ばれる検索エンジン最適化を施す事で検索エンジンでの表示順位をアップさせる技術もあります。
興味のある方は「SEO」「検索エンジン最適化」等で検索してみるといいでしょう。
主な検索サイト
http://www.google.co.jp/
http://www.yahoo.co.jp/
http://www.goo.ne.jp/
http://www.excite.co.jp/
http://www.livedoor.com/
http://www.infoseek.co.jp/
http://www.msn.co.jp/
http://beta.search.msn.com/
http://vivisimo.com/
http://www.alexa.com/
http://www.alexa.com/
http://search.aol.com/
http://www.altavista.com/
http://www.hotbot.com/
http://www.lycos.com/
http://search.netscape.com/
infoseek・livedoor・Excite・gooなどではGoogle社の提供するサービスを利用しています。
検索元は同じですのでGoogleで登録されればこちらの検索結果にも反映されます。
このコミュニティにご参加頂くと、コメントの書き込みができます
1件中、1～1件表示
ただ、全ての検索エンジンで有効なわけではなく、一部お行儀の悪い検索エンジンは設定を無視して情報を集めてしまうようです。
<meta http-equiv="robots" content="NOINDEX,NOFOLLOW" />
既に登録されてしまった場合も上記のmetaタグを入れておく事で次回クロール時に自動で削除されます。
http://www.google.co.jp/remove.htm
次回クロールまで待てない、早急に削除したいという方はこちらから。
http://services.google.com/urlconsole/controller