注目タグ

パソコンQ&A

トピック詳細

robots.txt について・・・ これって 合ってますか?

はじめまして。宜しくお願い致します。

最近 FC2 ブログを始めましたが、パソコンについての 基本的なことが分からず、いろいろ 答えを探しているうちに こち らへ たどりつきました。
どなたか お教えください。

私のブログが どうしても Google、bing の検索にかかりません。
(前者については、サイトマップの送信で 何とかなりそうな気配があるのですが・・・)

そこで いろいろ 調べるうち、Googleの、「ウェブマスターツール」において、「robots.txt により アクセ スが 拒否されました」という趣旨の エラーが サイトの登録要請のたびに、毎回出ていることが 分かりました。

「robots.txt」でクローラの 巡回を 拒んでいるようです。しかし、クローラの巡回を拒否するような「robots .txt」は、ソースに ありません。

いろいろ 調べるうちに ヒントがありました (私の解釈が ズレて いましたら御容赦下さい)。
その内容は、
User-agent: *
Allow: /    
このような 命令を、
1: メモ帳 (ワードパットでも OK?)に コピー&ペーストして、
2: UP して、
3: そのURLを サイトの ルートディレクトリ に 置く。
というものでした。

そこで、私がおこなったことは 「1」を Outlookから 自身の Gmail 宛てに メールに 添付するかたちで 送 り、その時に付いたURL を <https://~~> のように 半角かっこでくくり、それを <hea d> よりも 上の場所に ただ 張り付けました。

具体的には、「2」・「3」 の意味が 良く分からず、このようなことを致しました。このやりかたで 合っておりますでしょう か ?

御存じの方が おられましたら、お教えください。
何卒、宜しくお願い致します。

※  Metaタグ(<META NAME="ROBOTS" CONTENT="INDEX " />)の 追加も 試してみたのですが ダメでしたため、この方法を 行いました。


2009年10月03日 21:26  by 

コメント一覧 4件中、1~4件表示

  • その後、ちょっと 思ったことがありまして、以前の やり方を 変更してみました。
    一応、報告させていただきます。

    Outlook から Gmail へ UP した Mail と Google から来た Mail を 削除し、新たに FC2の「ファイルアップロード」 機能を用いて、「 User-agent: * Allow: / 」 というファイルをU P し、使用してみました。 

    <a href="http://blog-imgs-**.fc2.com/*/*/*/findingn everlandblog/robots.txt" target="_blank">h ttp://blog-imgs-**.fc2.com/*/*/*/findingneverlandblog/robots .txt</a>

    このような 形になりましたが、真ん中の 「 http://~~ 」 のみを 「 UTF-8 (?)」で エンコードして 、半角<>で くくり、<head>より上部へ 張り付けました。
    (これでしたら 文字として 表示されることも ありませんでした。)

    前のやり方だと 何だか Googleに メールの 全てが 筒抜けになっているような感じがしまして ( 杞憂だとは思いま すが ) ・・・・ 。

    とりあえずは これで しばらく 様子をみようと 思っております。
    こののち、googlebot.com が 巡回してくれている 気配がなくなった場合には、元のやり方に戻す つもりでおり ます。

    一方、「 bing 」 に関しましては、即効性のある方法が 分からず、こちらは 地道に コンテンツの 充実(?)を お こなってまいりたいと 思っております。

    私が気になっておりますのは、検索の順位ではなく、ブログの存在を 知らせた友人が 「見ることが出来ない」 という事態を 回避する事でして ・・・ 。

    ですので、検索で ヒットさえ してくれれば 十分有難いわけです。

    「 Yahoo 」 に関しては、ブログ登録後、すぐに ヒットするようになっておりまして、いろいろ 異なる部分があるもの なのだなァと 不思議に 思っております。

    これからも ブログのことや、パソコンのことを コツコツ 学んでまいりたいと思います。

    どうもありがとうございました。
    それでは 失礼致します。

    2009年10月07日 12:32 by

  • 乙一2号 様、こんな質問にお答えくださり、どうもありがとうございました。
    アドバイス戴いたように 変更してみます。気付きませんでした。

    パソコンに関する基本的な事って、意外と 調べにくく、こちらでお世話になった次第です。

    こんなところを、参考にさせていただいたのですが、・・・・・ 載せてみます。
    私の理解力を 超えていまして・・・ もっと この前の段階が 分かっておりませんから !?

    http://www.tagindex.com/index.html
    http://www.free-seo.jp/robots-crawl-yahoo-google-bing/
    http://turbohtaccess.com/#1
    http://www.fya.jp/support/document/hp/htaccess/access/
    http://www.tamandua-webtools.net/robots-exclusion-protocol. html#noindex
    http://www.google.com/addurl/?continue=/addurl
    http://www.google.com/support/webmasters/


    これからもよろしくお願い致します。
    では、失礼致します。


    いま、アクセス解析の 「ホスト」を見てみましたら、

    「 crawl-66-***-68-**.googlebot.com 」

    こんなのがありました。Googleが 来てくれていたようです。
    少し、嬉しくなりました。

    それでは ・・・・・

    2009年10月05日 10:37 by

  • 読みました!が、ごめんなさい、わかりません・・泣

    Google Adsenseに私は登録しましたが、登録したので引っかかるようになったのかはちょっと分かりかねます^^;

    扉と引き出し

    ですと、文法翻訳機能により、扉 or 引き出しで検索がかかり、優先順位上出てこないみたいですが

    扉と引き出し ブログ

    ですと、ほぼ一番上に来ますよ!

    2009年10月04日 17:35 by

  • すみません。 続きです。
    確か、「1」を [名前を付けて保存] するときに、「Unicode.txt (?)」、張り付けは 「UTF-8(?)」 でエンコードが必要だったような・・・?

    今、Gmailを みてみると、こんなメールが 来ておりました。


    Gmailの"添付ファイルの"robots.txtと呼ばれるビューには、Googleドキュメント& quot;のリンクとしてオープン使用されます。ドキュメント"。

    あなたhttps://docs.google.com/Doc?*****EmailImport Googleドキュメン トで編集可能なコピーを買うhttps://docs.google.com/Doc?******tEmailImport保 存これにより

    Google Docsにすることができます:
    を作成し 、ドキュメント、スプレッドシート、プレゼンテーションを編集すると 、どこからでもインターネットにアクセスして いる。

    他のユーザーと文書を共有しても、同じドキュメントを一度に協力し、リアルタイムのです。

    知っているあなたの文書は安全です 。以来、お客様のコンテンツはGoogleのサーバーに安全にいても、何かをハードドライ ブにどう格納されて、あなたの文書を保護されます。
    いつでも戻っGoogle Docsに直接https://docs.google.comで得ることができますhttps: //docs.google.com

    ありがとう、
    Googleドキュメントチーム


    自動翻訳です。これって、OKッて事なのでしょうか?
    自身で 試してみたら Googleの検索は ヒットしているようです。

    あとは、bing です。こちらが 難物。

    ※ 先述の 「2」について、FC2の 「ファイルアップロード」を つかって <https://~~>を ア ップし、張りつけたところ 文字として テンプレート上に 出てしまい、直に 張り付けた次第です。

    いまひとつ 「2」の「UP」の 意味が ・・・・・ ?
    「3」の「ルートディレクトリ」って 一体どこ ・・・・・?  「置く」って どうするのかなぁ・・・?

    基本がなってませんネ。 すいません。

    なんか とりとめのない文章になってしまい、申し訳御座いません。
    では、失礼致します。

    2009年10月04日 02:05 by