時robot.txtで使用される

1、、ページをインデックスのような検索ページを停止する（ユーザー別に検索ページを残して、検索ページには、特定の値を、の）2、自動車の駐車を防止するために生成された好きではない同一または類似のページをインデックスに登録されます："これは100,000ページに似てそれを必要とするインデックスに登録されているの？"3は、Webサイトを作成するためにプ 美容情報サイト
ロキシサーバーを防ぐためにインデックスを作成する アイオン　rmt