質問と回答

sitemap.xmlに関する疑問や質問

SEO対策中です。『robot.txt』 について、アドバイス願います...

質問日時:2007/06/07 20:03:36 解決日時:2007/06/10 22:39:40

SEO対策中です。『robot.txt』 について、アドバイス願います。 サイトマップを、無料サイトマップ作製サイトで作り、メモ帳でファイルを作りました。 これを、index.html と同じ場所にアップロードし、googleのサイト確認ステータスも緑のチェックマークに変わりました。 このとき、sitemap.xml と robot.txt をそれぞれメモ帳でファイルを作成せよとの指示に従い、実施(index.html と同じ場所にアップロード)しましたが、のちに、『robot.txt』 とは、googleロボットのスクロール拒否のためのファイルとも読み取れる文章を目にしました。 一体、『robot.txt』という、ファイルの目的は何なのでしょうか? 素人的には、『robot.txt』が、即ちスクロール拒否目的なら、seo対策上、マイナス効果と感じますが---。 はたして、このままの状況が正しいのでしょうか? 因みに、『robot.txt』ファイルの中身は、 Sitemap: http://***.com/sitemap.xml です。

ベストアンサーに選ばれた回答

特定のフォルダやファイルを覗かれたくないことってあると思いますが・・・ ロボットを制御する:robots.txt http://tech.bayashi.net/pdmemo/robots.html ウェブマスター向けヘルプ センター http://www.google.co.jp/support/webmasters/bin/answer.py?answer=40360&ctx=sibling 追記 No! です。 ロボットに登録されたくないファイルやフォルダーを記述すると思ってください。 User-agent: * Disallow: /cgi-bin/ これで、すべてのロボットからcgi-binフォルダーをブロックします。 特にブロックするものがなければrobots.txtは必要ありません。

Webサービス by Yahoo! JAPAN