DIYZONE

退屈だけでgoogleを検索し、それがいくつか含まれていないことがわかった。 無駄な接続。

しかし、我々は、ディレクトリとファイルの一部をクロールする検索エンジンを制限するためにrobots.txtを使用することができます。

robots.txtのは何ですか？ 実際には、Webサイトのルートディレクトリ上の唯一のものであり、いくつかのテキストのテキストフ​​ァイルを作成します。

それらのものは、誰ができないものを含めることができる検索エンジンに指示しています。

そうすることで、SEO、のいずれかの方法でWebページの使いやすさが向上します。

そうでなければいくつかのURLが、同じページが含まれています。 これは非常に良いではありません。

グーグルでは、いくつかを変更するには、対応するワードプレスのrobots.txtを見つけることができます。

次のように

ユーザーエージェント：*
許可しない：/ cgi-binに
許可しない：/ WP - adminの
許可しない：/ WP-含まれています
許可しない：/ wp-content/pluginsにアップロード
許可しない：/ wp-content/cache
許可しない/あなたのwp-content/themes
許可しない：/ wp-content/upgrade
許可しない/ WPAU·バックアップ
許可しない：/トラックバック
許可しない/コメント
許可しない* /トラックバック
許可しない* /コメント
許可しない：/ WP-考えられる理由

？中で＃を禁止し、すべてのファイル。URL
許可しない：/ *？
許可しない：/ *？

許可：/ wp-content/uploads

＃全ての画像を検索するGoogleイメージ検索ボットを許可する
ユーザーエージェント：Googlebotの - イメージ
許可しない：
許可：/ *

＃Google AdSenseに
ユーザーエージェント：Mediapartners-Googleの*
許可しない：
許可：/ *

ユーザーエージェント：*
＃許可しないこれらの拡張子で終わるすべてのファイル
許可しない：/ * PHPの$。
許可しない：/ * JS $
許可しない：/ * INC $
許可しない：/ * CSS $
許可しない：/ * CGI $。
許可しない：/ * xhtmlの。

＃Diggのミラー
ユーザーエージェント：duggmirror
許可しない/

＃サイト全体にAdSenseのロボットを許可する
ユーザーエージェント：Mediapartners-Googleの*
許可しない：
許可：/ *

サイトマップ：http://diy.001zone.com/sitemap.xml.gz

上記のコードは、robots.txtを、すべて小文字として保存されます。
そして、サイ​​トのルートディレクトリにアップロードされます。
など

http://diy.001zone.com

robots.txtは、オンになります

http://diy.001zone.com/robots.txt

簡体字中国語スペイン語繁体字中国語関連のポスト：

1. Googleの超ハング
2. GoogleのパブリックDNS：Googleが新サービスを開始