robots.txtの書き方

robots.txtは、ロボットが最初にアクセスするファイルです。このファイルで、ロボットにアクセスさせないファイルの設定などができます。 robots.txtは、トップディレクトリ(inex.htmlがある階層)にアッ…

もっと読む